论文部分内容阅读
免费APP“偷跑”
其實,在iPhone 11系列发布会上,苹果就已经展示过多镜头同时拍摄(Multi-Camera Capture Support),在现场用iPhone 11 Pro Max演示了一段四颗摄像头同时工作的场景。
而这款DoubleTake的功能非常直接,比如我使用的iPhone 11 Pro Max,进入界面就可以看到已经开启了超广角、广角、长焦和前置镜头,可以进行实时预览。好吧,拍什么不重要,这几天也不能出门,在家让熊孩子和她的兔兔一家合个影吧。
由于苹果的API限制,拍摄时允许同时启用两个镜头,直接勾选即可。而右下角的24FPS字样可以点击,目前可选24FPS、25FPS和30FPS三个档次(最大支持1080P)。
界面右上角的按钮可以选择拍摄模式,比如画中画和分屏显示,另外就是独立拍摄(多用于前后同时拍摄),比如像我这样让孩子一边自拍一边玩玩具,近距离拍摄时选择超广角镜头,就可以纳入更大的取景范围了。
而这多种拍摄模式输出的视频也是不同的,画中画(类似微信视频聊天的界面)和分屏显示只会输出一个视频,更适合用来记录自己的生活,比如最开始提到的极限运动,就可以这样拍,vlog选它就没错了。
而独立拍摄则可以用来拍摄舞台或者采访等场景,因为并不需要同时看到双方的细节,更多时候是看舞台上的演员和被采访者,大多数情况下观众的掌声或者采访者的提问,当作画外音就可以了。
如果有需要,也可以将观众和采访者的画面剪辑出来,这就很清楚了——需要一定的后期编辑。而前后摄像头同时工作,时间轴很容易体现,而且不用反复比对音频,也为后期省了不少的事。
并非华而不实
大家千万不要觉得这个多镜头拍摄没啥用,只是好玩。正如前面列举的几个使用场景,有了这个功能,还可以极好地解决音画不同步的问题,减少后期制作的麻烦——只需要根据拍摄时的时间轴就可以快速定位,完全不用“打板”。
其实,在拍照时这个功能也非常有用,当然不光是前后同时拍摄完成不同的取景,对最后产出的样张同样有很大的区别。
比如你可以在系统设置中开启“超取景框拍摄照片/视频”,然后在使用中不会让你感受到任何区别,该怎么拍就怎么拍就可以了。
但是仔细看相册中的照片,不少右上角有五星的样张都是经过系统自动调整过的。比如这张照片,其实在拍摄时已经用超广角进行了取景,并且根据算法自动判断并且裁剪出了最好的效果。
但是如果你对这个效果不满意,或者查看样张的时候发现某个角落取景不完整,就可以使用编辑功能,将“被裁掉”的部分找回来——当时拍摄的场景极有可能是难以重现的,用这样的方式也算是一个不错的补救方法。
而这个功能,也只有在iPhone 11系列上可以实现。
另外,在iOS 13.2中,还加入了全新的图像处理系统Deep Fusion,会在拍摄时自动启用多个摄像头同时拍摄,瞬间完成多张照片之后,通过算法逐个像素进行分析,最后“合成”为一张样张,这样就可以保证最后的成像效果一定是质量最好的。
得益于A13仿生芯片的神经网络引擎,这些在后台进行的运算你是完全无法感知到的,甚至连DeepFusion的开关都找不到,但它所带来的提升却是真实存在的。特别是中低光环境,可以有效降低噪点,完成更好的样张。
虽说摄像头越多画质并不一定越好,但是iPhone将这些摄像头联动起来,并且互相配合,这就非常难得了,对最后呈现的样张以及视频效果都有提升。而四摄同时拍摄视频这个功能,相信很快就会上线,4K+60FPS多镜头一键完成,多少大导演都盼望着的功能,其实只用一台手机就可以完成了。
就目前而言,DoubleTake提供的功能还是比较少,只实现了最基础的拍摄功能,后期编辑功能几乎没有。不过可以将拍摄的素材导入系统相册,然后用iPhone相册的编辑工具或者其他第三方APP来处理,对一般人来说,iPhone的原生相册就已经提供了调色、剪辑、裁剪画面等功能,已经够用了。
据FiLMiC官网显示,更多的高级功能应该会在后续版本的FiLMiC Pro中推出,比如更多机位(四摄同时拍摄)、更多编辑功能等。
如何实现的?
其实,早在10S13的发布会上(去年6月的WWDC 2019),苹果就已经提出了这个多镜头拍摄模式,当时的iPhone XS、iPhone XS Max、iPhone XR以及iPad Pro等新机都是可以使用的,比如iPhone XS就可以实现前后镜头共6种组合拍摄方式。
而在iPhone 11系列的发布会上,用FiLMiC Pro演示时,反复提到它“背后的功臣”——A13仿生芯片。这颗芯片的强大相信大家早有耳闻,跑分数据以及流畅度早就是众所周知的基本操作了,但四颗摄像头同时工作,这本就是一个工作量非常庞大的工程,对手机的处理能力要求非常高。
在Android阵营,其实已经有华为P30的双景录像、诺基亚的一键双镜头拍摄等,而在iPhone上四摄同时运行,并且同时支持4K 60FPS拍摄,这是非常难得的。
而且在拍摄的过程中,还需要同时调用感光元件、进行防抖修复并同时录制音频,并且还要保证多个镜头达到和谐的成像质量,不会在切换中或者在最后的成片中看出色彩差异,对拍摄算法和算力都是极大考验。
DoubleTake虽然现在看来只是一个“Dome版”,但它的完整形态其实已经在苹果的发布会上展示过了,而且官方也预告了下个版本不久就会上线,相信到时候这款APP还会带来更多的可能。