AI新闻主播是什么技术?

技术原理是,通过使用人脸关键点检测、人脸特征提取、人脸重构、唇语识别、情感迁移等多项前沿技术,并结合语音、图像等多模态信息进行联合建模训练后,生成与真人无异的AI分身模型。

在中国古老的神话传说中,有很多得道成仙之人拥有”分身术“。最高明的分身术非《西游记》中的孙悟空莫属,扯一把猴毛,吹口仙气,顿时就能变出无数个”分身”。当然,神话总归是神话,“分身术”显然是不存在的,所以才有一个成语叫做“分身乏术”。

不过,谁又能料到,“分身术”在今天真的能够实现。就在第五届世界互联网大会开幕当天,搜狗携手新华社发布了全球首个“AI合成主播“。即只需要提供文字,“AI合成主播”就能准确无误的像真人主播一样声情并茂的播出新闻。

而据了解,“AI合成主播”背后依托的是搜狗人工智能的一大核心技术“搜狗分身”。这项技术可以让机器以更逼真自然的形象呈现在用户面前,而不是冷冰冰的“机器人”。其技术原理是,通过使用人脸关键点检测、人脸特征提取、人脸重构、唇语识别、情感迁移等多项前沿技术,并结合语音、图像等多模态信息进行联合建模训练后,生成与真人无异的AI分身模型。