“AI合成主播”



11月7日,在第五届世界互联网大会上,有这样一场发布会,让发布会的主持人倍感压力和“虐心”。




当天,搜狗公司CEO王小川、新华社副社长刘思扬等嘉宾和著名主持人邱浩联合带来了一场跨界产品发布会:搜狗与新华社合作开发、全球第一个全仿真智能虚拟主持人——“AI合成主播”正式亮相。



这让合成主播原型且作为现场主持人的邱浩不禁感慨:“一个真实的主播,站在现在这个地方来主持一个虚拟主播的发布会,而且还要向世人去宣告,这样一个虚拟主播有多么的强大,简直虐心啊!我觉得这需要非常强大的勇气!”



“AI合成主播”到底是什么?



视频感受一下


全球第一个全仿真智能合成主持人由搜狗与新华社合作开发。



观众只要输入一句既有的新闻文本,屏幕上就会出现一位合成的新华社新闻主播,他不仅会用和真人一样的声音进行播报,连唇形、面部表情也能全然吻合。



这样的视频效果,无论看上去还是听起来,都与现实中的新华社主播的本人播报没有太大差别。


全球首个AI合成主播。


据了解,在合成主播的开发过程中,搜狗公司的相关技术人员同新华社的新闻主播一同进行了各种探索尝试,在“搜狗分身”技术的支持下,通过人脸关键点检测、人脸特征提取、人脸重构、唇语识别、情感迁移等多项前沿技术,并结合语音、图像等多模态信息进行联合建模训练后,“AI合成主播”典礼诞生。



什么是“搜狗分身”技术?


据搜狗公司智能语音事业部总经理王砚峰介绍,“搜狗分身”技术是搜狗人工智能的核心技术之一,诞生于搜狗“自然交互+知识计算”这一人工智能理念之下。该技术能够利用搜狗的AI能力,从图像表情,声音语言习惯,逻辑推理等层面对AI进行拟人化训练,然后克隆制造人类的AI分身,进而帮助人类提高信息表达和传递的效率。




以“AI合成主播”为例,该产品就创造性地使用新华社中、英文主播的真人形象,配合“搜狗分身”的语音、合成等技术模拟真人播报画面,使大众享受到逼真度极高的图像效果。


这种播报形式,突破了以往语音图像合成领域中,只能单纯创造虚拟形象,并配合语音输出唇部效果的约束,极大地提高了观众信息获取的真实度。同时,利用“搜狗分身”技术,“AI合成主播”还能实时高效地输出音视频合成效果。


在“搜狗分身”技术的支持下,使用者通过文字键入、语音输入、自然语言处理等多种方式输入文本后,将获得实时的播报视频。这种操作方式将极大减少新闻媒体在后期制作的各项成本,让新闻视频的制作效率有了极大的提高。



据介绍,早在2012 年,搜狗就开始了对语音技术研究的探索,并逐步发展为中国最大的语音识别引擎,目前,搜狗日均语音请求达5亿次,经过多年的技术沉淀和数据积累,已具备多语种、多音色的语音合成能力,并能实现个性化语音合成和情感迁移。



制作AI合成主播的技术团队,曾多次在机器视觉国际顶级赛事IEEE CVPR WAD、Pascal VOC、Mega Face以及语音合成领域最具权威性的Blizzard Challenge赛事上斩获冠军。


王小川:成为个人智能好助手


搜狗公司CEO王小川在发布会中发言。


搜狗公司CEO王小川在接受中国青年网记者采访时表示,合成主播只是“搜狗分身”技术的一个应用分支,除此之外,技术未来还将在娱乐、医疗健康、教育、法律等多个领域提供个性化的内容。“比如我们有时会收到大量的祝福短信,一条条去回复,如果要求回复内容还不一样,这样就很费时费力。那么把‘分身’技术用在这里,去构建一个虚拟的‘你’,去根据不同的信息进行回复,这将大大提高效率。通过技术发展,相信这个‘你’还能做更多事,我们的愿景是让产品成为个人生活的好助手、好帮手。



网友们纷纷赶来围观,并发表自己的观点:


@mei红梅 : 今后很多产业都将被机器人所代替

@扭扭波浪 : 这个技术进行联合建模训练和生成与真人一般无二的AI分身模型。

@小灰灰爱吃吃吃 : 第五届世界互联网在浙江乌镇拉开帷幕。

@为你变乖 : 这个声音这个表情都做得挺丰富的啦,与真人无异

@我是王薇薇呀 : 科技发展,让未来溢满无限的可能

@买辣椒也用卷呢 : 积极的拥抱新事物,AI是未来的发展趋势

@刘利花 : 以后我们的生活将会变得很轻松

@有你的归宿 : 现在科技都这么发达了吗?太厉害了了

@仄突仗腾 : 搜狗的黑科技,已经展现在了我们的面前。

@moon玥一 : 嘴唇有一点点跟不上语速呢

@懂比爱关键H : 让我们见识到了搜狗的快速发展。

@张晓东丨 : 这样的科技实在是太炫了。

@开着奔驰追蜗牛 : 不得不说,技术改变人类的生活

@啊哲哲哲吖 : 高科技越来越值得让人期待了

@叶落花开 : 满满的都是黑科技,简直太强大

@盐须神探 : 现在AI技术真的是厉害


看看网友的评论,才明白什么叫做段子手在民间,评论也是门技术活啊!


问题来了 | 假如你有一个AI智能虚拟分身,你最想让TA做什么?




资料来源

中国青年网、新京报等


以“AI合成主播”为例,该产品就创造性地使用新华社中、英文主播的真人形象,配合“搜狗分身”的语音、合成等技术模拟真人播报画面,使大众享受到逼真度奇高的图像效果。这种播报形式,突破了以往语音图像合成领域中,只能纯粹创造虚拟形象,并配合语音输出唇部效果的约束,极大地提高了观众信息获取的真实度。


发布     👍 0 举报 写留言 🖊   
✋热门推荐
  • #鞠婧祎[超话]##鞠婧祎花戎##鞠婧祎超话##鞠婧祎安利进行时##粉丝直播下的鞠婧祎##鞠婧祎##鞠婧祎嘉南传#jjy“你是夏日限定的玫瑰,冬日限定的雪花”
  • 厨房设计,必选高低台✅我们都是知道,橱柜的高度是要根据使用者的身高来定才合理,高10公分或者低10公分,往往就决定了你家厨房好不好用。再说了,我们自己的房子,怎
  • 朱元璋便亲自来到宁国城下督战,最终朱亮祖兵败被生擒,再次被擒的朱亮祖对朱元璋说:“要杀就杀,如果你不杀我,我就为你尽死力。1356年,宁国府被朱元璋攻下,朱亮祖
  • 西方世界,有无量寿佛、无量相佛、无量幢佛、大光佛、大明佛、宝相佛、净光佛,如是等恒河沙数诸佛,各于其国,出广长舌相,遍覆三千大千世界,说诚实言:“汝等众生,当信
  • 1982年12月,王雷出生于辽宁大连,小时候的他比较调皮,中学时他成长为一位小帅哥了,2000年他报考了中戏,2004年毕业后,以优异的成绩被北京人民艺术剧院录
  • FLAPPER翡拉帕丽火热的两款BB霜智利蜗牛BB霜,玫瑰BB霜,共同点:遮瑕力强,超服帖,不浮粉,提亮肤色‼️不同之处:蜗牛BB霜含有蜗牛原液能改善痘痘肌肤问
  • /小记最近看了潘博文#潘博文## 的天涯论坛很多人提到了平行时空的概念我也看了几篇分析的博文木村师哥分析的是不存在潘博文的肉身如果存在不会平白无故的消失更可
  • 那是雪与血长成的城市是遗忘与欲望收割的过去热血热过不能被抹去可也没记起南方的银杏树香樟几百岁了林海雪原,天高地阔,万里晴空,云卷云舒我就是“望着你的面孔,想念却
  • 无症状感染者10,现住台湖镇燕保台湖家园C1区5号楼。无症状感染者14,现住永顺镇富力惠兰美居E区3号楼。
  • (7)有时可有生理功能的轻度紊乱,如呃逆、胃肠胀气、过度换气,但这些本身并不影响相应器官或系统的基本生理功能。(3)症状通常为两种类型:第一种类型的特点是,
  • 可她还是来了,不是满树齐放,还是一朵一朵的开,好像她开得很不容易,却在努力绽放。偶尔停下匆忙的脚步变成别人眼中的风景何尝不是好事今年秋天的我会满心欢喜的看落日余
  • 我还得再加加油,马上就期末啦[赢牛奶]最近每天过的都有点累,但又很充实也会感到快乐,其实最怕的就是自己没事做无所事事的虚度时间,我真的希望自己的每天都过得稍微精
  • 较长的车身和轴距,不仅完全符合当前主流市场对"大尺寸和大空间"的审美,而且在豪华车的灵气、个性和活力之间,也取得了完美的平衡。上汽奥迪A7L
  • #2021款iPhone名字确定##玩个密室差点以为爱情来了##很会化妆是什么体验##爸妈吵架时我该怎么做##全世界最美的烟花在中国##狗都知道女人不好惹##防
  • 我观点不变,作品永远是她最可靠的底气,与其为了这些“网络路人缘”放任某些人的狂欢,我宁可当个恶霸[ok]如果,我不抄写马上对我拳打脚踢和不给我一点能吃的东西,也
  • 你们将坚硬的外壳展示给世界,“不要来烦我”然而懂你们的人都晓得你们内在是多么柔软,敏感。 简单来说,就是由于其坚硬的外壳和柔软的内在,这也是巨蟹座人的最好的写
  • 暖心治愈系的神仙短句 1. 最好的总在不经意间出现。 2. 你会被理解的,你会被偏爱的,你会超级超级幸福的。 3. 我想做个可爱的人,心里藏着温柔,给生活
  • 3,会出现心理问题盲目追星,由于内心的狂热,往往已经失去理智,把偶像作为自己的精神依托,整日神情恍惚,生活在一种幻想世界中,导致心理失去平衡。有些粉丝再追星的道
  • 丈夫的不发言,让女主人心里更加的堵塞,从孩子生下来,两个人即使住在一个屋子里,说话都不超过十句。婆婆和丈夫都没有阻拦,只有公公说了句:“你刚出月子,还是待两天
  • 。。