技术原理是 , 通过使用人脸关键点检测、人脸特征提取、人脸重构、唇语识别、情感迁移等多项前沿技术 , 并结合语音、图像等多模态信息进行联合建模训练后 , 生成与真人无异的AI分身模型 。
以下是新闻原文 , 供参考 。
在中国古老的神话传说中 , 有很多得道成仙之人拥有”分身术“ 。最高明的分身术非《西游记》中的孙悟空莫属 , 扯一把猴毛 , 吹口仙气 , 顿时就能变出无数个”分身” 。当然 , 神话总归是神话 , “分身术”显然是不存在的 , 所以才有一个成语叫做“分身乏术” 。
【AI合成主播 AI合成主播的技术原理是什么】全球首发“AI合成主播” , 搜狗AI核心技术“搜狗分身”亮相
不过 , 谁又能料到 , “分身术”在今天真的能够实现 。就在第五届世界互联网大会开幕当天 , 搜狗携手新华社发布了全球首个“AI合成主播“ 。即只需要提供文字 , “AI合成主播”就能准确无误的像真人主播一样声情并茂的播出新闻 。
而据了解 , “AI合成主播”背后依托的是搜狗人工智能的一大核心技术“搜狗分身” 。这项技术可以让机器以更逼真自然的形象呈现在用户面前 , 而不是冷冰冰的“机器人” 。其技术原理是 , 通过使用人脸关键点检测、人脸特征提取、人脸重构、唇语识别、情感迁移等多项前沿技术 , 并结合语音、图像等多模态信息进行联合建模训练后 , 生成与真人无异的AI分身模型 。
更重要的是 , “搜狗分身”技术还让机器首次做到逼真的模拟人类说话时的声音、嘴唇动作和表情 , 并且将三者自然匹配 , 达到与真人几乎一致的效果 。从最终的呈现方式来看 , ”AI合成主播“相当于是真实新闻主播一个“分身” 。
这也同时意味着 , 传说中的“分身术”在一定程度上被搜狗通过AI技术“实现” , 而这必然能够对于人类的生活和生产方式产生巨大的影响 。
以新闻这个行业为例 , 近年来 , 有不少媒体人积劳成疾 , 英年早逝的报道 , 归根结底是 , 职业病所致 , 众所周知 , 媒体人工作压力大 , 长期熬夜工作是司空见惯的事情 , 长期高强度高压下工作是导致很多媒体人早逝的重要原因 。
现在有了“搜狗分身”技术加持的“AI合成主播” , 这意味着 , 未来的新闻主播可能不用半夜三更坚守岗位 , “AI合成主播”可以扮演新闻主播们的“分身” , 无论是深夜还是凌晨都可以坚守岗位 , 为用户即时播报新闻 。
所以 , 此次搜狗联合新华社发布的“AI合成主播”是真正具有落地场景的AI应用 。而“AI合成主播”的诞生 , 也并不仅仅是减轻媒体人工作负担这么简单 , 其对新闻行业的生产方式和生产效率都将产生积极的影响 。正如搜狗CEO王小川所言:AI合成主播的诞生 , 将为媒体生产端带来无限想象空间 , 是智能时代大幅提升新闻生产、传播效率、新闻价值的有效手段 。也因如此 , 新华社副社长刘思扬在发布会现场更是当场宣布:新华社AI合成主播将正式上岗 , 成为新华社报道队伍中新的一员 。
“搜狗分身”技术或将赋能更多行业 , 让更多行业“分身有术”
更神奇的是 , ”搜狗分身“技术不同于以往的一些AI技术 , 并不需要机器对于大量的语料数据进行学习 。而是能够仅靠少量用户真实音视频数据 , 即可快速定制出高逼真度的分身模型 。并且 , 这项技术还可以批量复制无数个风格各异的人类形象 , 满足用户的各种个性需求 , 从而提升不同行业和职业的信息生产传播效率 。这显著降低了个性化定制成本 , 使得这一技术能够面向更多行业场景进行落地应用 。
事实上 , 搜狗分身技术的应用场景的确可以非常广泛 , 除了新闻播报之外 , 还可以涵盖需要人类其他参与的众多内容表达场景 , 例如虚拟教师、虚拟客服、虚拟律师等 , 这将对教育、商业服务、法律等领域都将产生巨大的影响 。
比如应用到教育行业 , 虚拟教师可以扮演真实教师的“分身” , 满足学生随时随地获取知识的需求 , 这将大大减轻教师们的重复性工作负担 , 使得教师们有更多的时间进行教学研究 , 从而进一步提升教学质量 。再比如应用到电商行业 , 现在的电商行业虽然也有AI客服 , 但是远没有达到像真人一样的语气和表情与用户进行实时沟通 , 大多数时候依然是一个“冷冰冰”的机器人 , 这导致用户的服务满意度并不高 。而如果应用“搜狗分身”技术 , AI客服可以像真人一样与用户沟通 , 这将大大改善用户与商家的关系 。
可以预见 , 一旦“搜狗分身”未来应用到娱乐、教育、法律等这些行业领域 , 通过提供个性化的内容和服务 , 必然能够显著提高社会生产和服务效率 。在帮助各行各业解放生产力的同时 , 也能够切实的提高人们的生活体验 。
搜狗AI技术持续快速落地 , 已成国内标杆
事实上 , 自从搜狗在2016年将人工智能定为战略方向之后 , 搜狗就明确了其“自然交互+知识计算”的人工智能技术发展理念 。经过两三年的技术研发和持续投入之后 , 搜狗的AI技术正在不断加速落地 。基于AI技术 , 搜狗除了不断完善优化自己的搜狗搜索、搜狗输入法等核心产品之外 , 还新推出了搜狗速记翻译笔、搜狗旅行翻译宝、搜狗糖猫儿童手表等智能硬件产品 。
根据搜狗刚刚发布的最新财报披露 , 搜狗通过搭建AI开放平台 , 更是已经赋能众多合作伙伴 。在科技行业 , 搜狗的AI技术已经搭载到了京东APP、华为智能音箱、猎豹AI音箱等;而在手机行业 , 搜狗语音、翻译相关技术也已经落地于Vivo、魅族等手机产品中;在体育行业 , 搜狗的AI同传技术更是作为全球首个支持国际体育赛事的AI同传 , 相继支持中国网球公开赛、国际马术大师赛、FINA游泳世界杯等全球性赛事 。而在新闻领域 , 除了这次与新华社携手发布“AI合成主播”之外 , 此前还与人民日报社达成战略合作协议 , 共同建设了全国党媒AI技术赋能平台 。不难看出 , 随着“AI合成主播”的发布 , 以及“搜狗分身”技术的成功落地 , 搜狗未来必然能进一步拓宽其业务边界 , 在中国乃至全球市场扮演更多重要的角色 。而搜狗CEO王小川也在发布会上也透露:“除了“AI合成主播”外 , 未来将进一步探索“搜狗分身”的边界 , 将“搜狗分身”技术逐步应用到中国与世界各国家跨语言交流场景中去 , 助中国走向世界 , 让世界更了解中国 , 为“一带一路”倡议下的国际合作提供帮助 。
推荐阅读
- 圣卢西亚是一个怎样的国家
- 红掌喜欢什么土壤
- 去青岛旅游的注意事项
- 减肥瑜伽瘦腰
- 一句经典的励志说说带图片
- 一直消化不良的危害
- 感到无助和心累的说说 一个人心累无助的说说
- 推荐两款有效的产后调养食谱
- 我的电脑开机后只显示一个j
- CC双键能使高锰酸钾褪色的原理