【PChome手机频道资讯报道】11月18日 ， OPPO正式在ODC 2020（OPPO开发者大会）上正式推出了全新的OPPO FDF人像视频技术系统 。 这也是OPPO近年来针对视频拍摄领域的最大一次技术迭代 。 OPPO顺应5G时代人像拍摄从照片转向视频的大趋势 ， 综合了“魔镜专项”技术调研结果与已有的技术成果 ， 推出了OPPO FDF 全维人像视频技术系统 。 该技术旨在优化人物主体与整体画面的实拍表现 ， 并针对性开发出了感知人像引擎与画质增强引擎 ， 覆盖了人像视频拍摄的方方面面 ， 让美自然生长 。
文章图片
文章图片
文章图片
其中 ， 感知人像引擎旨在针对拍摄时的人像区域进行优化 。 OPPO研发团队通过AI算法 ， 搭建深度神经网络 ， 精准检测人脸区域 。 理论上 ， 感知人像引擎可实现99.78%的检测准确率以及25ms的单帧检测耗时 ， 进而精准构建人脸优化范围 。 与此同时 ， 在AI算法作用下 ， 感知人像引擎还可利用296个人脸关键点实现五官和轮廓细节区分 ， 加入判断辅助信息 ， 实现了低至4.71%的模型损耗 ， 并在移动平台上实现了200fps以上的运行帧率 。 这与OPPO计算机视觉团队出色的技术实力密不可分 。
文章图片
文章图片
在人脸优化环节中 ， OPPO FDF全维人像视频技术系统利用AI算法 ， 实现了超清人像功能 ， 并利用深度神经网络子模块对人脸进行超分计算、降噪优化和锐度优化 。 这样做的优势在于可以轻松直出高码率的视频作品 ， 视频细节更加禁得起考量 。 在OFL肤质优化算法的加持下 ， OPPO可利用轻量化AI模型 ， 重新设计Loss函数 ， 综合用户大数据模型进行AI训练 ， 最终实现对肤色肤质的精准把控 ， 实现96.5%的皮肤区域分割准确率以及97.4%的面部皮肤精度 ， 甚至还可对全身皮肤区域进行精准标记与精确优化 。
文章图片
文章图片
AI祛瑕疵功能则可区分天生特征与后天瑕疵 ， 实现真实、个性的人像风格呈现 。 这一功能的加入 ， 使得不同地区的用户均可进行个性化的审美表达 。 人像畸变矫正则可利用透视投影和球面投影之间的逻辑关系 ， 在矫正人脸畸变时也能够对背景画面进行针对性畸变优化 ， 以保证画面的真实感 ， 增加广角画面感染力 。 可以说 ， OPPO FDF 全维人像视频技术系统的感知人像引擎将常规人像修图的复杂过程融入到了拍摄过程中 ， 使得视频的每一帧都能够还原人像的动人之处 。
文章图片
而画质增强引擎则可通过对画面防抖、夜景视频和HDR视频的灵活把控 ， 保证背景画面自然真实 。 其中 ， 新一代的防抖算法继承了HIS混和视频防抖以及超级防抖功能的技术底蕴 ， 加入了场景检测过程 ， 通过抓取陀螺仪、加速度计和Sensor的数据判断运动轨迹、姿态和曝光条件 ， 针对XYZ三轴抖动进行针对性优化 。 这对于手机延时摄影、动态画面拍摄、第一人称视频拍摄等特定场景有重大意义 ， 可使得多帧过渡更加平滑 ， 实现了类似于手持云台的动态拍摄效果 。
文章图片
画质增强引擎还继承了OPPO Reno4系列的超级夜景视频技术 ， 优化视频算法 ， 并对夜景视频和HDR算法进行了融合 ， 优化过程包括整体提亮、局部提亮和多帧融合 ， 能够更好降低时域噪声 ， 提高亮度过渡平滑性 ， 适合拍摄夜景、逆光之类的大光比场景 。 其搭载的新一代融合算法在亮度、色彩与降噪方面均有不错的表现 。 值得一提的是 ， 该技术还被应用到了前置摄像头 ， 使得前置夜景人像的效果获得了史无前例的巨大提升 。
文章图片
在挑战性更高的逆光场景下 ， OPPO结合自己打磨3HDR以及Smart- HDR的技术积累 ， 推出了全新的DOL- HDR方案 ， 同时进行长短曝光 ， 减少前后帧间隔时间 ， 改善鬼影问题 。 值得一提的是 ， 画质增强引擎的开放性不仅仅在于前后拍摄兼容 ， 还可以适配第三方软件 。 这也就意味着拍摄者可能在快手、抖音、微视等第三方平台上无缝体验这一新技术 ， 跳过了繁琐的处理过程 ， Vlog视觉效果也能够因此获得显著提升 。
文章图片
在人像拍摄方面 ， OPPO有着充足的技术积累以及独到的审美取向 。 从2009年OPPO P51的500万像素摄像头以及LOMO风格滤镜再到OPPO R系列的极致美颜与AI智能拍照功能 ， OPPO无时无刻不在引领人像拍摄的技术潮流 ， 其在人像美颜、虚化、防抖、夜景等影像技术的专利申请总数超过700件 ， 发明专利占比80% 。这在人像视频需求越发旺盛的5G时代无疑是难能可贵的 。
文章图片
【技术|专业级打造 OPPO推出FDF全维人像视频技术系统】对于手机行业来讲 ， OPPO FDF 全维人像视频技术俨然跳出了单一照片、人眼追焦、语义分层优化以及传统人眼精修的范畴 ， 也不再纠结于真实感和视觉美感的平衡点 ， 直击专业人像拍摄的要点 ， 在保证体验的基础上实现了“傻瓜操作” 。 这对于“还处于第一层的广大厂商、第三方软件提供方来讲 ， 说得上是降维打击 ， 一定会引发一股人像拍摄技术进化的狂潮 ， 并有望扩展器在5G条件下的应用场景 。 据悉 ， OPPO有望在今年12月份推出搭载OPPO FDF 全维人像视频技术系统的新品 ， 让我们一起拭目以待吧！
推荐阅读
- 技术|“2”类医械有重大进展：神经介入产品井喷、基因测序弯道超车
- bleu|字节跳动火山翻译上新 38 个稀有语种，翻译能力再升级
- 机身重量|黑科技眼控对焦23年后回归，升级！ 江一白解读EOS R3
- 精度|将建模速率提升10倍，消费级3D扫描仪Magic Swift在2021高交会大显“身手”
- 选型|数据架构选型必读：2021上半年数据库产品技术解析
- IT|95306铁路货运电子商务平台升级上线 可24小时办理货运业务
- 技术|使用云原生应用和开源技术的创新攻略
- 技术|聚光科技旗下临床质谱仪获批医疗器械注册证
- Apple|苹果高管解读AirPods 3代技术细节 暗示蓝牙带宽可能成为瓶颈
- MateBook|深度解析：华为MateBook X Pro 2022的七大独家创新技术