人像摄影这条赛道,走在最前端的就是 vivo
— 积极拥抱 AIGC
这段时间 AIGC 的新技术是层出不穷,前有 AI 作画,后有 AI 扩图,各行各业都已经积极的投入 AIGC 的怀抱之中了。比如在医疗中可以通过分析大量病例来进行疾病预测;在金融中可以从历史数据中分析和预测客户的信用风险;在生产中也可以利用机器视觉和图像处理技术,确保产品的良品率……
(相关资料图)
那么这项充满可能性的技术对于各大手机厂商来说,会有怎么样的应用呢?刚好,7 月 30 日,vivo 就举办了一场影像盛典,首发了 6nm 的 V3 芯片、4K 电影人像、全新的长焦镜头镀膜等一系列新技术,其中也不乏许多 AIGC 技术的应用。能看出这次是铁了心要在人像这条赛道上继续深耕,那么对于本身已经走在最前端的 vivo,这次又能带给我们什么样的惊喜呢?这篇文章我们就来详细聊一聊吧!
— 在人像的道路上不留余力
为什么 vivo 这么热衷于人像摄影之中呢?所谓千人千面,每个人都有着完全不同的面孔,其中包括脸型、五官、皮肤、毛发等等,而在计算摄影时代我们需要对每一张照片都进行语义分割,再去把相应的场景进行对应的调整。那么因为人脸的复杂性,人像这个板块,显然就是最难攻克的一部分。在手机摄影发展的过程中,大部分厂商都先把目光放在了更小挑战的场景中,那就是「风光摄影」,而 vivo 则反其道而行之。
从 2015 年的 X5 Pro 首次推出了知性美颜算法开始,vivo 就开始在人像这条赛道上不留余力的投入;2019 年的 X30 首次搭载了 50mm 专业人像镜头,这个焦段一直被沿用至今,成为了 vivo 的标志;到了现在的 X90 Pro+ 又新加入了 90mm 人像黄金焦段,开启了长焦人像这条道路。
vivo 的人像摄影之路虽然看起来一帆风顺,但实际上要在背后需要付出非常多的投入。我们看似轻松的人像美颜算法实际上也是一直在进步迭代的,从最开始的美白磨皮、到超清肤质、再到自然立体的肤质还原算法,还有各种蔡司联名的景深效果,人像摄影每向前前进一小步,都是由无数工程师的日日夜夜辛勤换来的。
— vivo 仍在前行
可人像计算摄影之路就止步于此了吗?vivo 并不这么认为!依托于重庆影像实验室平台,vivo 建立了动捕实验室。在全新的实验室中,vivo 通过 170+ 相机摄像头来捕捉建模,建立起「毛孔级」人体 3D 模型,模型的精细程度能做到哪怕一比一放大都看不出瑕疵。
光说不练假把式,vivo 还当场邀请了媒体老师去实际体验一下,现场通过摄像头拍摄各个角度的照片,之后通过 40 分钟左右的时间来合成建模。在这短短的时间内,最终呈现的效果还原度也是极高的。
那么这个动捕实验室有什么作用呢?毕竟实验室中有 170+ 摄像头,还有电脑的算力配合,这种建模条件,实际使用中肯定有不少的局限性,又怎么能反哺到手机影像中呢?这时 AIGC 的加入就变得尤为重要。通过不断的积累 3D 模型数据,储备以人脸、人体、手势为核心的三大人像 3D 感知能力,来「喂饱」AI,从而得出更加精确的人体 3D 深度算法。
当然,徒有算法却没算力的支撑怎么能行呢?那么 vivo 近几年来布局的 V 系列自研芯片,尤其是这次首发的 6nm V3 芯片的作用,就可以展现得更加淋漓尽致了。这次动捕实验室的主要目标,意在通过 AIGC 的学习能力,使手机的算法更加了解人体构造;再配合上 V3 芯片更强的算法,让手机的几颗摄像头能够尽量接近实验室中 170+ 相机配合电脑算力的效果。
有了足够的 3D 数据喂进去,vivo 在人像的计算中就能够靠更多的深度信息积累,来实现更加精准的对焦与抠像。在探访实验室的过程中,我们也看到了目前 vivo 的抠像水平有了跃进式的进步,像镜框、发丝这些抠像难题,现在也能够做到较高的抠像精度。
同时,不止照片中的抠像精度增加,这次因为 V3 的算力更强、摄像头捕捉的深度信息更精确,vivo 还在安卓平台首发了 4K 电影人像,能够完成实时精准的抠像。另外,全焦段超级夜景(全焦段 SuperRAW)、臻彩夜景模型、XDR Photo 2.0、多光谱传感器(AI AWB)、CCM 色彩矫正矩阵 3D lut 技术、vivo 质感色彩等一系列新技术的发布,也代表着 vivo 不止人像走在最前端,其他场景的表现水平同样名列前茅。
除了算法和算力,摄影的根本质量,还是由镜头来决定的,恰好,这也是 vivo 的优势之一。这次又双叕和蔡司联合研发,升级了镀膜,开发出「Vario-Apo-Sonnar」全新标准的长焦镜头,能够更好的降低镜镜片之间的反射率,在复杂光源下实现更纯净的画面。这样一来,从镜头到算力再到算法,vivo 这次来了个 360 度无死角升级,看来誓要将影像这条赛道卷到天翻地覆。
这次的重庆动捕实验室不止带来影像层面的跃进,还通过更加精确的深度信息和算力,开发了不少后期的玩法,其中令我印象比较深刻的就是「人像重打光」技术。
如果把一个人抠下来放入一个场景之中,为什么会显得非常违和呢?答案就是光线,抠下来的人物与场景中的光线没有任何联系,明显是一个断层的关系。而 vivo 这次的「人像重打光」就是通过更加精确的 3D 人物模型和深度信息,来给人物身上加上场景中应该有的光线。有了这项技术的加入,这种抠图换背景的图片明显显得更为自然、和谐,甚至可以做到以假乱真,足不出户拍出四季人像大片,为未来人像摄影增加了更多的可能性。
除此之外,vivo 还开发了很多根据动作捕捉来实现的玩法,比如运动追踪同时配合特效。这项技术不同于之前的平面特效追踪,而是通过采集深度信息来实现的,未来可能会在 XR 平台上大放异彩。
— 顺应时代,超越时代
通过这次重庆之旅,小编收获了很多的感悟。vivo 作为人像摄影的引领者,不但没有骄傲自满,反而继续探索前行。对于人像计算摄影来说,vivo 之前做的相当于是把点变为线、再把线变为面的过程;而到了今天,vivo 似乎有了更大的野心,决定把平面的图像放到 3D 中去处理,将人像摄影这项技术,推到全新的高度。
在 AIGC 开始盛行的时代,vivo 的嗅觉毫无疑问是敏锐的,现在小小的手机中,就已经能够拍出以假乱真的人像摄影作品,而当我们早已习惯的平面作品,以立体的形式出现在我们面前,我们可以精确的把其中的人物抠出来,可以精确的把这个人物放在其他场景中,到那个时候,我们是不是要重新认识一下移动影像了呢?