-
需求
公司混合開發,uni端拍小視訊不是很理想,為達到仿微信效果,原生外掛走起
-
思路
第1步:1個AVCaptureSession, 1塊AVCaptureVideoPreviewLayer[考慮相容替換成AVPreView]
第2步:視訊錄製需video & audio, 需要對應的AVCaptureDeviceInput,同理對應的AVCaptureVideoDataOutput與AVCaptureAudioDataOutput
第3步:代理中設定output區分video與audio, 並將對應的CMSampleBufferRef寫入到視訊檔案中
第4步:寫入視訊檔案中,用到AVAssetWriter, 對應video & audio 需兩個AVAssetWriterInput, 加入AVAssetWriter
第5步:CMSampleBufferRef不斷過來,AssetWriter不斷寫入,直到停止
-
上菜
第一步的初始化就不寫了,沒事可以翻看本人前面的部落格
第2步:兩個AVCaptureDeviceInput 兩個Output, 且設定Output的代理
self.videoInput = [[AVCaptureDeviceInput alloc] initWithDevice:device error:&error]; if (error) { NSLog(@"取得裝置攝入videoInput物件時出錯, 錯誤原因: %@", error); return; } // 裝置新增到會話中 if ([self.session canAddInput:self.videoInput]) { [self.session addInput:self.videoInput]; } [self.videoOutput setSampleBufferDelegate:self queue:self.videoQueue]; if ([self.session canAddOutput:self.videoOutput]) { [self.session addOutput:self.videoOutput]; } // 音訊相關 AVCaptureDevice *adevice = [AVCaptureDevice defaultDeviceWithMediaType:AVMediaTypeAudio]; self.audioInput = [[AVCaptureDeviceInput alloc] initWithDevice:adevice error:&error]; if ([self.session canAddInput:self.audioInput]) { [self.session addInput:self.audioInput]; } [self.audioOutput setSampleBufferDelegate:self queue:self.videoQueue]; if ([self.session canAddOutput:self.audioOutput]) { [self.session addOutput:self.audioOutput]; } // 視訊輸出 - (AVCaptureVideoDataOutput *)videoOutput { if (!_videoOutput) { _videoOutput = [[AVCaptureVideoDataOutput alloc] init]; _videoOutput.alwaysDiscardsLateVideoFrames = YES; } return _videoOutput; } // 音訊輸出 - (AVCaptureAudioDataOutput *)audioOutput { if (!_audioOutput) { _audioOutput = [[AVCaptureAudioDataOutput alloc] init]; } return _audioOutput; }
第3步:啟動Session,代理裡面操作CMSampleBufferRef
#pragma mark - AVCaptureVideoDataOutputSampleBufferDelegate & AVCaptureAudioDataOutputSampleBufferDelegate - (void)captureOutput:(AVCaptureOutput *)output didOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection *)connection { @autoreleasepool { // 視訊 if (connection == [self.videoOutput connectionWithMediaType:AVMediaTypeVideo]) { if (!self.manager.outputVideoFormatDescription) { @synchronized(self) { CMFormatDescriptionRef formatDescription = CMSampleBufferGetFormatDescription(sampleBuffer); self.manager.outputVideoFormatDescription = formatDescription; } } else { @synchronized(self) { if (self.manager.state == StateRecording) { [self.manager appendBuffer:sampleBuffer type:AVMediaTypeVideo]; } } } } //音訊 if (connection == [self.audioOutput connectionWithMediaType:AVMediaTypeAudio]) { if (!self.manager.outputAudioFormatDescription) { @synchronized(self) { CMFormatDescriptionRef formatDescription = CMSampleBufferGetFormatDescription(sampleBuffer); self.manager.outputAudioFormatDescription = formatDescription; } } @synchronized(self) { if (self.manager.state == StateRecording) { [self.manager appendBuffer:sampleBuffer type:AVMediaTypeAudio]; } } } } }
第4步:AVAssetWriter以及對應的Input
// writer初始化 self.writer = [AVAssetWriter assetWriterWithURL:_videoUrl fileType:AVFileTypeMPEG4 error:nil]; _videoInput = [AVAssetWriterInput assetWriterInputWithMediaType:AVMediaTypeVideo outputSettings:_videoSettings]; //expectsMediaDataInRealTime 必須設為yes,需要從capture session 實時獲取資料 _videoInput.expectsMediaDataInRealTime = YES; _audioInput = [AVAssetWriterInput assetWriterInputWithMediaType:AVMediaTypeAudio outputSettings:_audioSettings]; _audioInput.expectsMediaDataInRealTime = YES; if ([_writer canAddInput:_videoInput]) { [_writer addInput:_videoInput]; } if ([_writer canAddInput:_audioInput]) { [_writer addInput:_audioInput]; }
第5步:第3步的CMSampleBufferRef通過AVAssetWriter寫入到視訊檔案中
- (void)appendBuffer:(CMSampleBufferRef)buffer type:(NSString *)mediaType { if (buffer == NULL) { NSLog(@"empty sampleBuffer"); return; } @synchronized (self) { if (self.state < StateRecording) { NSLog(@"not ready yet"); return; } } CFRetain(buffer); dispatch_async(self.queue, ^{ @autoreleasepool { @synchronized (self) { if (self.state > StateFinish) { CFRelease(buffer); return; } } if (!self.canWrite && mediaType == AVMediaTypeVideo) { [self.writer startWriting]; [self.writer startSessionAtSourceTime:CMSampleBufferGetPresentationTimeStamp(buffer)]; self.canWrite = YES; } if(!self.timer) { dispatch_async(dispatch_get_main_queue(), ^{ self.timer = [NSTimer scheduledTimerWithTimeInterval:TIMER_INTERVAL target:self selector:@selector(updateProgress) userInfo:nil repeats:YES]; [[NSRunLoop currentRunLoop] addTimer:self.timer forMode:NSDefaultRunLoopMode]; }); } // 寫入視訊資料 if (mediaType == AVMediaTypeVideo) { if (self.videoInput.readyForMoreMediaData) { BOOL success = [self.videoInput appendSampleBuffer:buffer]; if (!success) { @synchronized (self) { [self stop:^{}]; [self destroy]; } } } } // 寫入音訊資料 if (mediaType == AVMediaTypeAudio) { if (self.audioInput.readyForMoreMediaData) { BOOL success = [self.audioInput appendSampleBuffer:buffer]; if (!success) { @synchronized (self) { [self stop:^{}]; [self destroy]; } } } } CFRelease(buffer); } }); }
-
寫在末尾:
-
AVAssetWriterInput設定視訊屬性時,按照自己的需要設計,其中位元速率與幀率的設定會影響到拍攝後視訊的質量與大小,具體看各自專案的要求
-
如果視訊視角存在問題,可以從三個方向入手調整
1.layer的connect設定下videoOrientation
2.AVCaptureOutput的connect設定下videoOrientation
3.AVAssetWriterInput針對video是設定下transform,比如Rotation M_PI/2 角度
-
iOS拍個小視訊
相關文章
- 解密幾百個號拍同一個視訊玩法解密
- 短視訊app開發之ios小視訊開發經驗共享APPiOS
- Cordova開發app——短視訊拍攝APP
- IOS音視訊(二)AVFoundation視訊捕捉iOS
- iOS節拍器開發iOS
- CustomPainter——微信拍視訊按鈕效果實現AI
- iOS VR視訊開發iOSVR
- Android 拍攝(橫 豎屏)視訊的懶人之路Android
- iOS訊息轉發小記iOS
- iOS 獲取視訊圖片iOS
- 視訊硬編碼(iOS端)iOS
- 小程式音訊和視訊音訊
- 在微信視訊號發現“好看廣州”,城市形象短視訊等你來拍!
- iOS除錯小技巧,在殺死程式怎麼檢視NSLog資訊iOS除錯
- iOS視訊流採集概述(AVCaptureSession)iOSAPTSession
- iOS視訊採集實戰(AVCaptureSession)iOSAPTSession
- iOS開發 iOS整合FFmpeg及視訊格式轉碼iOS
- 視訊剪輯小結
- 小程式播放當前視訊關閉其他視訊
- 手把手教你構建一個音視訊小程式
- iOS開發系列--音訊播放、錄音、視訊播放、拍照、視訊錄製(轉)iOS音訊
- 工具素材分享篇:拍攝剪輯與視訊製作必備!
- 自媒體人如何拍攝vlog短視訊?這幾個網站輕鬆幫你解決網站
- iOS下WebRTC音視訊通話(一)iOSWeb
- iOS整合FFmpeg及視訊格式轉碼iOS
- iOS 圖解一個功能很全的視訊播放器的使用iOS圖解播放器
- 短視訊商城在ios短視訊開發上的應用效果iOS
- 視訊播放–踩坑小計
- 視訊播放--踩坑小計
- 華為雲攜手秒拍,雲+AI助力短視訊加速發展AI
- Stereolabs推出ZEDMini,為VR頭顯提供實時拍攝視訊傳輸ZedVR
- 新手做自媒體,不用露臉拍視訊,方法都在這篇文章
- 批量將一個視訊新增到多個視訊中的背景,一鍵生成視訊背景
- iOS開發 webview禁止視訊全屏播放iOSWebView
- iOS ARKit錄製視訊(AVAssetWriter & 有聲音)iOS
- 視訊直播技術之iOS端推流iOS
- Android實踐:做一個可視訊互動的智慧小車Android
- Chrome 新功能 - 錄製小視訊Chrome