央视主持人撒贝宁与虚拟主持人小小撒(右)同台主持
郎朗与虚拟歌姬洛天依在演唱会上互动。
被命名为“新小浩”的男性站立式AI合成主播,以新华社主播邱浩为原型。在声音方面,采用领先的波形建模技术生成音频,极大提升了合成音频的表现力和真实度。在图像方面,通过模型优化及多风格数据的使用,实现更加逼真的表情合成、肢体动作与语义的恰当匹配以及更加自然的唇动效果。
新华社推出的全球首个AI合成女主播新小萌
编者按
虚拟明星偶像、网络虚拟主持人、AI合成新闻主播……不知不觉间,一大波新朋友正向我们“走”来:她可能是音乐会上能唱会跳、轻歌曼舞的人气歌手,也可能是网络春晚中你熟悉、喜欢的主持人的“孪生兄弟”,或是新闻APP上24小时为你播报新闻的美眉、帅哥;未来,ta还可能是你想象或想象不到的更多其他形象。他们不仅有着真人的外表、动听的歌喉、专业的播报、曼妙的舞姿,甚至还会与你展开现场互动,“本事”不逊真人明星,让人一时难辨真假。这些科技感十足的“人气王”走进了人类越来越多的真实生活场景,为我们生动地展示着计算机编程演算的应用杰作,以及科技的魅力。
■ 中国妇女报·中国女网记者 王慧莹
虚拟歌手与钢琴师跨界结合
“当她‘走’到我面前时,我还是完完全全被惊艳到了!”这是郎朗首次见到洛天依向自己走来时的感受。一个是身处顶级音乐殿堂享受掌声的钢琴大师,一个是在中国最具人气的虚拟歌手,新鲜感十足的首次跨界结合,让前来观看演出的观众更加好奇:这个长相萌萌的小女孩,到底是谁?
近日,科技感十足的洛天依&郎朗全息演唱会引发热议。虚实相融的科技体验搭配上古典钢琴,演唱会现场两位演绎者完美地跨过了“现实”与“虚拟”的屏障,完成了二次元的虚拟形象与古典音乐演奏家跨界的首次合作,这场演唱会也被称为“虚拟与现实的破次元跨界合作”。
洛天依不存在实体,从她的形体、动作到声音,全部由计算机编程演算而来。简单地说,她是通过音乐生成软件,配合专门的音源库,通过手绘的2D形象或者3D形象来演绎歌唱的虚拟偶像。
洛天依是近年来在中国众多虚拟偶像中最成功的一个。她曾经在大热的文化综艺节目《经典咏流传》上献唱过,还与周华健、杨钰莹、萧敬腾等众多歌手合作多种音乐类型,也登上过大型晚会。从上电视节目,到参加大型晚会,洛天依的每一次亮相都备受关注。
虚拟主持人、AI主播纷纷上岗
越来越多的虚拟偶像频繁现身于电视晚会、广告拍摄、大型演唱会、新闻播报等场合,人气毫不逊色于真人明星。
继去年推出全球首个“AI(人工智能)合成(男)主播”后,近日,新华社推出了“全球首个AI合成女主播”,并在全国两会报道中正式上岗。而不久前的2019年网络春晚上,当撒贝宁携手“小小撒”一同亮相舞台时,他更是笑言,未来主持人、主播等相关职业会不会被虚拟人物取代?
虚拟主持人“小小撒”的容貌特征身高比例像极了撒贝宁本人。撒贝宁说,“感觉像自己照镜子一样”。主持人的一举一动、喜怒哀乐,甚至与观众的亲密互动,都在虚拟主持人身上一一呈现。
这是今年网络春晚首次启用AI虚拟主持人,据其生产商美国人工智能公司偶邦联合创始人郑毅介绍,为了让虚拟人物逼近理想原型,要先用三维扫描仪选取多侧面扫描和3DS MAX、MAYA等建模工具分析,构造人脸、身型等,这种“立体捏脸”技术在收集至少百人数据后,通过自我迭代训练逐渐完善。
同时,采用AI语音技术,主持人无须录制大量文本建立语音数据库,只需其较短几十句标准原声,通过特征参数提取,便可利用迁移学习的算法建立独特发声模型。有了声音模型后,任何输入的文字都可以用撒贝宁的声音读或唱出来,甚至有中日英韩四种语言。
在节目制作上,结合人工智能和动作捕捉训练,模拟原型的口语表达、脸部表情、手势、形体运动及场景互动等,由传感器运动跟踪设备完成虚拟主持人的个性化呈现。
播音员、主持人将被替代?
虚拟偶像的现场互动完全不逊于真人,让郎朗大呼过瘾。“我弹琴时,挺愿意用不同角色帮助自己理解音乐,这次从《献给爱丽丝》到肖邦《雨滴》有一个故事,这种感觉特别好,比我平时弹琴还要过瘾。”
据悉,作为结合音乐合成软件和音库的技术,虚拟偶像的声音本质上是一种电子乐器,作者只要在专属声库软件中输入歌词和音调即可让偶像“唱歌”。而此次演唱会上,除了洛天依优美流畅的舞姿,加之现场全息投影、实时动作捕捉,演唱会现场郎朗与洛天依虚实对话合作的画面能清晰地到达观众眼前。因此,此次演唱会的观赏性毫不逊色与真人合作。
头一次和虚拟主持人同台主持,撒贝宁感觉“危机四伏”——“小小撒”控现能力极佳,全程妙语连珠,几乎不给撒贝宁发挥的空间。遇到了“强劲对手”,撒贝宁笑称自己感受到了职业危机:“技术的发展真的超出我们的想象。我还记得五年前,我问过一位人工智能专家,主持人这个行业未来会不会被人工智能取代。他说大概还有五年。看来现在到了我和大家说再见的时候了。”
知名音乐人林迈可谈及“洛郎演唱会”时表示,音乐需要突破,跨领域合作包含视觉科技、古典音乐与流行音乐,会成为趋势。“未来五年,虚拟偶像有望占据更多市场份额,国外流行音乐日趋电子化,已经开始让人分辨不出真假,我觉得一定会有新的风格出现。”
洛天依只是近年来虚拟偶像的代表之一,她的大热,也预示着因为科技而衍生出的这一群体正在慢慢被接受。
尽管“下岗”是小撒的一句玩笑,但人工智能的飞速崛起不容忽视。如今,像“小小撒”“合成主播”等虚拟人物的出现更是向我们展示了技术革新向前跨越了一大步。当然,虚拟人物在动作说话等多方面即使和真人无误,但是人的情感、共鸣性等软实力,是机器无法取代的。