AVCapture编程理解
AVCapture用于媒体采集,在媒体采集的流程中,会存在如下几个对象:
- AVCaptureDevice。这里代表抽象的硬件设备。
- AVCaptureInput。这里代表输入设备(可以是它的子类),它配置抽象硬件设备的ports。
- AVCaptureOutput。它代表输出数据,管理着输出到一个movie或者图像。
- AVCaptureSession。它是input和output的桥梁。它协调着intput到output的数据传输。
一、它们之间的关系
有很多Device的input,也有很多类型的Output,都通过一个Capture Session来控制进行传输。即:CaptureDevice适配AVCaptureInput,通过Session来输入到AVCaptureOutput中。这样也就达到了从设备到文件等持久化传输的目的(如从相机设备采集图像到UIImage中)。
【注意】:这里的关系是可以通过唯一一个Capture Session来同时控制设备的输入和输出。
那么存在一个问题了:视频输入(input)就对应视频的输出(output),而音频输入就应对应音频的输出,因而需要建立对应的Connections,来各自连接它们。而这样的连接对象,是由AVCaptureSession来持有的,这个对象叫AVCaptureConnection。
在一个ACCaptureConnection中,这里维持着对应的数据传输输入到数据输出的过程(detail过程)。这里,AVCaptureInput或其子类对象包含着各种input port,通过各种input port,我们的AVCaptureOutput可以获取到相应的数据。
一个ACCaptureConnection可以控制input到output的数据传输。
二、Session及其使用模式
1 AVCaptureSession *session = [[AVCaptureSession alloc] init]; 2 3 // Add inputs and outputs. 4 5 [session startRunning];
这里表明了,需要create一个session,然后发running消息给它,它会自动跑起来,把输入设备的东西,提交到输出设备中。
若想在一个已经使用上的session中(已经startRunning了)做更换新的device、删除旧的device等一系列操作,那么就需要使用如下方法来进行处理:
1 [session beginConfiguration]; 2 3 // Remove an existing capture device. 4 5 // Add a new capture device. 6 7 // Reset the preset. 8 9 [session commitConfiguration];
当然,如果session发生了异常,那么我们可以通过notification去observe相关的事件(可以在AVCaptureSession Class Reference中的Nofications中找到相应的情况),而session如果出现相应问题时,它会post出来,此时我们就可以处理了。
三、AVCaptureDevice
InputDevice即是对硬件的抽象,一对一的。一个AVCaptureDevice对象,对应一个实际的硬件设备。
那么显然,我们可以通过AVCaptureDevice的类方法devices或devicesWithMediaType去获取全部或局部设备列表。(当然也可以检测相应的设备是否可以使用,这里注意有设备抢占问题,当前是否可用)
相机设备可以用下面的方法判断设备是否支持相关属性(property),比如对焦方式或者对焦状态Focus modes。
1 if([currentDeviceisFocusModeSupported:AVCaptureFocusModeContinuousAutoFocus])
此外,设置对焦点CGPoint时,需要注意位置:
a CGPoint where {0,0} represents the top left of the picture area, and{1,1} represents the bottom right in landscape mode with the home button on the right。
当我们需要对一个设备的属性进行观察,我们可以使用KVO来处理。(为啥观察,比如我们需要知道设备此时是否正在对焦or已经停止了对焦)
对于一个device的属性更改,我们的做法通常是:
1 if([deviceisFocusModeSupported:AVCaptureFocusModeLocked]) 2 { 3 //do configuring 4 [device unlockForConfiguration]; 5 } 6 else 7 { 8 //Respond to the failure as appropriate. 9 }
四、CaptureInput的构建和添加到Session中的方法
1 /*创建并配置输入设备*/ 2 AVCaptureDevice *device = 3 [AVCaptureDevice defaultDeviceWithMediaType:AVMediaTypeVideo]; 4 NSError *error = nil; 5 6 AVCaptureDeviceInput *input = 7 [AVCaptureDeviceInput deviceInputWithDevice:device error:&error]; 8 9 //添加input到session的模式是(检查可否添加到session,然后根据情况添加或者不添加): 10 AVCaptureSession *captureSession = <#Get a capture session#>; 11 12 if ([captureSession canAddInput:input]) 13 { 14 [captureSession addInput:captureDeviceInput]; 15 } 16 else 17 { 18 //handle the failure. 19 }
五、output的分类和使用
在ios中,分为MovieFile、VideoData、AudioData和StillImage几种output,使用方式类似,只是范围不同。另外,它们都继承于AVCaptureOutput。
第一个是输出成movie文件,第二个适用于逐个Frame的处理,第三个适用于声音采集,第四个是still image(静态图像<拍照>)相关。
它们的添加方式都是使用session的addOutput方法。