美文网首页
iOS 连接手机摄像头获取视频流数据

iOS 连接手机摄像头获取视频流数据

作者: iOS_tree | 来源:发表于2019-03-11 11:31 被阅读0次

当我们需要读取摄像头和相册数据时,我们可以使用系统的UIImagePickerController类来达到我们的目的。但读取的是录制后的数据,对于摄像头数据我们不能进行中间控制,当我们需要自定义读取摄像头的数据或者需要自定义UI时,则使用系统提供的UIImagePickerController类不能达到我们的目的。我们则需要自己手动连接控制摄像头来达到我们的目的。
首先奉上苹果摄像头的官方文档地址:https://developer.apple.com/documentation/avfoundation/cameras_and_media_capture
我们主要使用的类有四个,分别是:AVCaptureDevice、AVCaptureDeviceInput、AVCaptureSession、AVCaptureVideoDataOutput,他们的关系如下:

官方说明
工作流程如下:
AVCaptureDevice代表摄像头硬件对象,捕获摄像头的实时感光数据,AVCaptureDeviceInput为摄像头的输入对象,把AVCaptureDevice的数据捕获传递给AVCaptureSession,AVCaptureSession对象作为连接的桥一样,把AVCaptureDeviceInput的数据传递给AVCaptureVideoDataOutput对象,我们通过AVCaptureVideoDataOutput的代理拿到最终数据。我们依次初始化各个对象即可拿到视频流数据。

1、创建AVCaptureDevice对象

    //创建AVCaptureDevice的视频设备对象
    AVCaptureDevice* videoDevice = [AVCaptureDevice defaultDeviceWithMediaType:AVMediaTypeVideo];

2、创建AVCaptureDeviceInput对象

依赖于第一步创建的AVCaptureDevice对象

//创建视频输入端对象
    AVCaptureDeviceInput* input = [AVCaptureDeviceInput deviceInputWithDevice:videoDevice error:&error];
    if (error) {
        NSLog(@"创建输入端失败,%@",error);
        return;
    }

3、创建AVCaptureSession对象,设置输出的格式

格式有多种分辨率选择

    AVCaptureSession *captureSession = [[AVCaptureSession alloc] init];
    [captureSession setSessionPreset:AVCaptureSessionPreset640x480];

4、把AVCaptureDeviceInput对象添加到AVCaptureSession对象中

    //添加输入端
    if (![captureSession canAddInput:input]) {
        NSLog(@"输入端添加失败");
        return;
    }
    [captureSession addInput:input];

此时,AVCaptureSession的左边已经完成。

5、创建AVCaptureVideoDataOutput对象,并添加到AVCaptureSession中

    //创建输出端
    AVCaptureVideoDataOutput *videoDataOutput = [[AVCaptureVideoDataOutput alloc] init];
    //会话对象添加输出端
    if ([captureSession canAddOutput:videoDataOutput] == NO) {
        NSLog(@"添加输出端失败");
        return;
    }
    [captureSession addOutput:videoDataOutput];

6、设置AVCaptureVideoDataOutput对象

添加成功后,我们对AVCaptureVideoDataOutput对象进行必要的设置.AVCaptureVideoDataOutput需要我们自定义代理方法调用的队列,队列必须为串行队列保证数据输出的顺序。此外我们可以设置是否延时丢帧。我们还需要设置像素的输出格式。

 dispatch_queue_t videoDataOutputQueue = dispatch_queue_create("videoDataOutputQueue", DISPATCH_QUEUE_SERIAL);
    self.videoDataOutputQueue = videoDataOutputQueue;
    //设置代理和调用的队列
    [self.videoDataOutput setSampleBufferDelegate:self queue:videoDataOutputQueue];
    //设置延时丢帧
    self.videoDataOutput.alwaysDiscardsLateVideoFrames = NO;
    
    NSNumber *BGRA32PixelFormat = [NSNumber numberWithInt:kCVPixelFormatType_32BGRA];
    //设置像素输出格式
    NSDictionary *rgbOutputSetting = [NSDictionary dictionaryWithObject:BGRA32PixelFormat
                                                   forKey:(id)kCVPixelBufferPixelFormatTypeKey];
    [videoDataOutput setVideoSettings:rgbOutputSetting];

到此,基本已经设置完毕。

7、开始和停止

开始和停止调用第三步创建的AVCaptureSession对象的方法即可,如下:

- (void)startRunning;
- (void)stopRunning;

8、实现AVCaptureVideoDataOutput代理方法

代理方法有两个,如下:

//获取到buffer数据
- (void)captureOutput:(AVCaptureOutput *)output didOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection *)connection;
//丢弃的buffer数据
- (void)captureOutput:(AVCaptureOutput *)output didDropSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection *)connection API_AVAILABLE(ios(6.0));

在第一个代理方法里面接收数据即可。

9、设置闪光灯

有时我们有需求需要打开闪光灯进行拍摄,此时对第一步创建的AVCaptureDevice进行控制即可。首先判断设备是否有闪光灯和闪光灯是否可用,然后请求设置权加锁(因为可能不止你一个人在设置设备,猜测是为了保证资源的安全访问),设置闪光灯,解除锁,设置完毕,代码如下:

- (void)setTorchSwitch:(BOOL)torchSwitch {
    _torchSwitch = torchSwitch;
    if ([self.captureDevice hasTorch] == NO || [self.captureDevice isTorchAvailable] == NO) {
       NSLog(@"没有闪光灯");
        return;
    }
    
    NSError *error = nil;
    if ([self.captureDevice lockForConfiguration:&error] == NO) {
       NSLog(@"修改失败==%@",error);
        return;
    }
    if (torchSwitch == YES && [self.captureDevice isTorchModeSupported:AVCaptureTorchModeOn]) {
        //开启闪光灯
        self.captureDevice.torchMode = AVCaptureTorchModeOn;
    }else if ([self.captureDevice isTorchModeSupported:AVCaptureTorchModeOff]) {
        //关闭闪光灯
        self.captureDevice.torchMode = AVCaptureTorchModeOff;
    }
    [self.captureDevice unlockForConfiguration];
}

demo地址:https://github.com/XMSECODE/ESCCameraDemo

相关文章

网友评论

      本文标题:iOS 连接手机摄像头获取视频流数据

      本文链接:https://www.haomeiwen.com/subject/stuvpqtx.html