新华社北京5月20日电(记者邬金夫)她能随时变换发型,她能随时更改服装,她能穿梭于演播室的不同虚拟场景中……然而,她却不是真人,她是全球首位人工智能驱动的3D版AI合成主播。
↑“新小微”走进虚拟演播室。
“大家好,我叫新小微,是由新华社联合搜狗公司推出的全球首位3D版AI合成主播,我将为大家带来全新的新闻资讯体验。”
一段“未来感”十足的视频播报画面让人眼前一亮,全球首位3D版AI合成主播在全国两会开幕前夕正式亮相,这是继全球首位AI合成主播、站立式AI合成主播、AI合成女主播、俄语AI合成主播之后,新华社智能化编辑部联合搜狗公司最新研发的智能化产品。
“新小微”是如何诞生的?
“新小微”的原型是新华社记者赵琬微,采用最新人工智能技术“克隆”而成。从外型上看,“新小微”高度还原真人发肤,在立体感、灵活度、可塑性、交互能力和应用空间等方面,较前一代AI合成主播(2D形象)有了大幅跃升。在特写镜头下,甚至连头发丝和皮肤上的毛孔都清晰可见。
3D版AI合成主播,是如何诞生的?
“‘新小微’的研发,经历了极其复杂的过程。”据项目负责人介绍,研发人员进行了海量数据采集工作。赵琬微戴着数据采集头盔,几百个摄像头对其身体部位360度全方位“打点”扫描,采集每一处细节,并对其多种形态的表情和动作进行细致入微的捕捉记录。
↑赵琬微正在进行数据采集,3D渲染由原力科技公司提供技术支持。
“就像拼乐高一样,我们对‘新小微’的各个部位和表情进行了模块化处理,然后重新组装。”项目负责人解释说,通过算法实时驱动、渲染构建出来的3D数字人物模型,表情唇动、肢体动作和语言表达实现了高度契合。
据介绍,目前绝大部分“能动”的3D数字人,主要是靠真人驱动。而“新小微”采用的是人工智能驱动,输入文本后,AI算法便可实时驱动“新小微”,生成的语音、表情、唇动更接近于真人。
“新小微”实现了哪些升级进化?
和前一代AI合成主播相比,“新小微”实现了从单一景深机位到多机位多景深、微笑播报到多样化精微表情播报等进步,播报形态可通过不同角度全方位呈现,立体感和层次感明显增强。
↑“新小微”在站姿状态下播报新闻。
“前一代AI合成主播只能在坐姿或站姿下做一些简单的手势。‘新小微’不仅能走动和转身,还能摆出各种复杂动作和姿态,灵活性大大提升了。”项目负责人介绍。
此外,“新小微”以其“微模块化”的特性,实现了灵活“变妆”。她的发型、服饰均能根据不同新闻和场景变换,这些功能也是前一代AI合成主播所不具备的。
↑“新小微”播报新闻,面部表情生动自然。
“可以说,3D版AI合成主播在多方面都更加智能化了,在人工智能的实时驱动下,可实现功能持续自我更迭。”项目负责人说。
“新小微”将开启怎样的未来想象?
作为新闻界首位由人工智能驱动、3D技术呈现的AI合成主播,“新小微”在今年全国两会期间可量化生产新闻播报视频。
只需要在机器上输入相应文本内容,“新小微”就能播报新闻,并根据语义生成相对应的面部表情和肢体语言。
“随着后期自我更迭和进化,‘她’的工作空间会更大。”项目负责人说,随着3D虚拟场景不断拓展,“新小微”将走出演播室,在不同场景中更好地满足新闻呈现的多样化需求。
↑“新小微”的播报形态可通过不同角度全方位呈现。
2018年11月7日,新华社联合搜狗公司发布全球首位AI合成主播,“克隆”出与真人主播拥有同样播报能力的“分身”。此后又不断迭代升级和扩容,业界评论这是人工智能技术在新闻领域的开拓性应用。
作为新华社AI合成主播家族的最新成员,3D版AI合成主播在今年全国两会期间将通过新华社客户端为广大网友带来全新的新闻资讯体验,也将进一步助力新华社智能化编辑部建设,推动媒体融合向纵深发展,为新闻生产的“未来场景”开辟新空间。
总策划:刘思扬
出品:陈凯星、周亮
策划:齐慧杰
监制:何强、曹晓轩
统筹:李瑜、卢静娜
海报设计:潘红宇
视频制作:胡碧霞
新华社新媒体中心&搜狗公司联合出品
相关链接: