感知人像+画质增强引擎加持 OPPO人像视频技术正式发布智能手机自诞生之初

智能手机自诞生之初，除了解决人们基础的通信诉求之外，就在不断探索各种全新的形态，像是拍照无疑就是我们日常使用最多的功能之一。而在对于人像的拍摄上， OPPO无疑是这其中的引领者之一。早在2009年， OPPO就在P51机型上搭载了500万高清摄像头，并且搭载了拍照人脸检测和LOMO风格滤镜。 2012年，进入智能机时代以后， OPPO在U701、R9系列、R11系列、R15系列等机型上对摄像头和算法持续升级，为我们带来了更为优质的人像拍摄新体验。
文章插图
而最近随着OPPO未来科技大会2020的召开， OPPO又发布了一项重磅的黑科技，那便是OPPO FDF全维人像视频技术系统。在这一系统中主要包含感知人像引擎与画质增强引擎两个部分，更为系统化地向我们展示了OPPO在人像拍摄方面的最新研究成果。
像是在感知人像引擎中就包含AI人脸/人脸关键点检测、AI超清人像、OFL肤质优化、人脸畸变矫正等几个技术要点。其中最让人印象深刻的莫过于OFL肤质优化与人脸畸变矫正两个部分了。
文章插图
【感知人像+画质增强引擎加持 OPPO人像视频技术正式发布】其中OFL肤质优化上， OPPO进一步扩大了“皮肤区域的定义” ，相比于业内常见的仅定义脸部皮肤区域， OPPO AI肤色检测还涵盖脖子和手部皮肤区域，用户在拍摄后对皮肤区域进行调整就不会出现脸、脖子和手皮肤表现不一致的问题。在实际处理中，神经网络模型会基于单帧图像生成脸部皮肤Mash图，并且通过结构特征提取的方式再生成脖子和手部的皮肤Mask ，而非皮肤区域例如头发、衣物、首饰等就会被标记成其他类别，精准切割、区分处理。
文章插图
而人脸畸变矫正主要应对的问题就是超广角摄像头在拍摄时出现的边缘畸变问题，系统在获取到传感器上的透视投影图像后，再对画面进行一次球面投影，两次投影分别得到真实形态的背景画面和人物画面，而后对两个画面进行叠加生成矫正后的新画面，实现人物和背景的自然矫正。在运算过程中使用均匀的细网格表示图像，一方面减少计算量使运算过程更快，另一方面更便于对矫正后丢失的画面进行补偿处理。
文章插图
画质增强引擎则主要是针对OPPO此前视频超级防抖、超级夜景视频等算法的进一步增强。像是在视频防抖方面。 OPPO新一代超级防抖算法中加入了场景检测，通过检测手机陀螺仪、加速度计和Sensor的数据，对运动轨迹、姿态和曝光进行判断，建立不同拍摄场景下的抖动模型，并针对性地匹配防抖策略。 OPPO新一代超级防抖算法应用到移动延时摄影中，还额外增加了运动趋势判断，使被抽取出来的多帧画面过渡更平滑，并且实现更长时间跨度的防抖。
文章插图
多种精细化的软件系统优化，得以让我们在进行人像视频拍摄时可以更加从容。或许在OPPO发布的下一代新机上，这些最新技术就能有所应用，怎么样，是不是对于OPPO最新的人像视频拍摄体验充满了期待呢？