2018,手机和传统相机已经开始分道扬镳,传统相机还在倒腾那些传家宝,而手机摄像头则全面步入计算摄影时代。2019年,手机上的计算摄影应用更为深入,也因此触发了争议事件。
年中的时候,华为P30 Pro发布,其中AI模式下拍摄月亮引发风波。
有媒体测评人员指出,P30 Pro AI模式下拍摄的月亮比普通模式下清晰得多,因为怀疑月亮的纹理是通过算法P上去的。所谓PS,狭义的PS指的是Photoshop,简称为P,引申为用Photoshop处理,而更进一步的泛指为后期处理。这里说的P,当然指的是最后一层意思。
我们从网上找了一张飞机飞过月亮留下投影的照片,因为版权问题,我们不发原图。我们在电脑显示器上显示这张图,然后使用P30 Pro拍摄,拍摄了几十张,典型的结果有两种,就是上组图片呈现的那样。一种是飞机还在,但很模糊,一种是月亮轮廓很模糊了,但月表比较清晰,可飞机不见了。
由此可以肯定的说,P30 Pro的月亮是经过机内后期处理的。这里不去做道德审判,只说技术的应用。这其中涉及到超分辨率成像和风格迁移。
超分辨率成像指的是通过算法把低分辨率的或者高糊的图像变成高分辨率的或者清晰的图像,其中动用插值/重建等技术手段。风格迁移比较难以理解,它在本例中,是超分辨率成像是运用的一种重建手段,飞机的投影被转换成类似月坑的纹理,这种影像上的变化,技术上叫做风格迁移。
这类技术未来一定会更多的出现在手机摄像头成像应用当中,例如用于重建弱光场景下丢失的纹理在技术上具有可行性,剩下的事情,就是这种技术参与度的考量,是重建少量纹理还是重建大部分纹理?参与了却不告知消费者?估计未来还会有大的争议出现。而这类技术,与已经与传统的相机技术毫不相干。
最新发布vivo X30 Pro也有一个拍月亮的模式,它的实现原理也颇有新意。它可以实现在夜景场景中确保月亮成像清晰,而不是溢出成一个白点,尺寸上也会略带夸张。它利用的是多层蒙板技术,类似于PS处理中的多层。其中主摄拍摄夜景,中长焦镜头完成月亮的拍摄,然后合成到一帧图像当中。这也是一种新型的摄影计算。
去年的行业观察中,我们提到了AI、HDR、夜景,这是2018年计算摄影的关键词,2019年中,它们依然是热门。
AI在经历了脑热时期之后,厂商提得少了,应用却更深入了,例如,新机型的人脸识别技术,可以更好的识别侧脸、墨镜和围巾遮挡的脸部等等,并分析出正确的裸露的皮肤区域进行美肤处理,从技术上讲,这是不小的进步。再例如,某些机型的自动对焦,会自动的对场景进行图像识别,除了人脸之外,还会识别牛羊马狗等常见动物并完成对焦设置,这些都是经过大图库训练的结果。而这些技术的进化,很少在文案中吹嘘,却实实在在的改善了体验。
HDR依然是成像的关键技术,属于必争之地,它的难度在于观感指标的把握上,HDR的触发与力度都会对色彩、质感、影调产生负面影响,不同场景下的破坏程度不一,如果做到各方面的指标均衡,仍是各家烦恼事。2019年,新手机的HDR的技术水平整体提升明显,越来越多的手机,在弱光中也能良好的利用HDR完成成像,以获得更大的信息量。从手机上大规模应用HDR开始,手机已经和传统相机产生了技术分歧,随着HDR技术的发展,手机与相机也渐行渐远。
夜景模式在2019完成了彻底的普及,包括姗姗来迟的苹果,也在新的iPhone 11 Pro中加入了类似功能,而且,还提供了优秀的拍摄体验。从技术角度说,夜景功能在2019年整体进步不大,并没有获得更强悍的品质提升,可能当前手机平台的算力还不够强。
超像素、风格迁移、多层蒙版合成、AI、HDR、夜景、假虚化、美容美颜、对焦逻辑优化等等,这些都是计算摄影的范畴,而这背后,需要强劲的图像处理器、感光器高宽带性能、图像算法的支撑,这已经形成了一个和相机不一样的技术生态圈,相比传统相机产业,手机摄像头技术的升级方向,更能代表未来。