安科信息网

安科信息网 首页 行业 人工智能 查看内容

全球首个3D AI合成主播发布

2020-5-22 18:41| 发布者: 科技汇| 查看: 59| 评论: 0

摘要:   5月21日,在全国瞩目的两会召开之际,搜狗联合新华社推出的全球首个3D AI合成主播“新小微”正式亮相,为全国观众带来最新的两会新闻资讯报道。基于搜狗人工智能核心技术“搜狗分身”打造的“新小微”,将拉开中 ...

  5月21日,在全国瞩目的两会召开之际,搜狗联合新华社推出的全球首个3D AI合成主播“新小微”正式亮相,为全国观众带来最新的两会新闻资讯报道。基于搜狗人工智能核心技术“搜狗分身”打造的“新小微”,将拉开中国传媒行业全面进入智慧时代的序幕。

  搜狗分身技术再突破,带领AI合成主播进入3D时代

  作为AI合成主播的开创者和引领者,自2018年基于搜狗分身技术推出全球首个AI合成主播后,搜狗分身持续取得重大突破,此次的3D AI合成主播就是搜狗分身最新的突破性成果。

  “新小微”以新华社记者赵琬微为原型,基于超写实3D数字人建模、多模态识别及生成、实时面部动作生成及驱动、迁移学习等多项人工智能前沿技术,使机器可以基于输入文本生成逼真度极高的3D数字人视频内容。

  “‘新小微’的研发,经历了极其复杂的过程。”据项目负责人介绍,研发人员进行了海量数据采集工作。赵琬微戴着数据采集头盔,几百个摄像头对其身体部位360度全方位“打点”扫描,采集每一处细节,并对其多种形态的表情和动作进行细致入微的捕捉记录。

  ▲赵琬微正在进行数据采集

  3D AI合成主播结合了原力科技提供的业界领先的扫描还原、面部肌肉驱动、表情肢体捕捉等技术,生产出了高度还原真人发肤、形象逼真的数字人模型;同时基于搜狗分身领先的端到端多模态建模技术,使用语音、图像、文本、3D肌肉运动数据等多模态信息完成联合建模训练。

  在AI算法的驱动下,只需输入文本内容,“新小微”就能根据语义实时播报新闻,其表情唇动、肢体动作和语音表达高度契合、自然逼真。

  从2D到3D,搜狗AI持续引领融媒体应用创新

  搜狗推出全球第一位AI合成主播后,通过不断迭代更新使AI合成主播具备了多语种播报、对话交互等诸多能力,用最前沿的技术能力和产品效果,不断推动传媒行业内容生产的效率变革。

  据统计,首位 AI 合成主播“新小浩”已在新华社客户端上持续为观众服务500 多天,先后产出13,000多条新闻报道,累计时长超过35,000分钟。

  ▲“新小微”的播报形态可通过不同角度全方位呈现

  较之前的2D AI合成主播,3D“新小微”不仅立体、灵活,可控,还具有同时支持多机位多景深,360°任意角度呈现内容等能力,在应用空间上拥有更多的可能性,为新闻节目多样化制作和呈现带来了更多选择。

  “新小微”将开启怎样的未来想象?

  作为新闻界首位由人工智能驱动、3D技术呈现的AI合成主播,“新小微”在今年全国两会期间可量化生产新闻播报视频。

  只需要在机器上输入相应文本内容,“新小微”就能播报新闻,并根据语义生成相对应的面部表情和肢体语言。

  ▲“新小微”播报新闻,面部表情生动自然

  “随着后期自我更迭和进化,‘她’的工作空间会更大。”项目负责人说,随着3D虚拟场景不断拓展,“新小微”将走出演播室,在不同场景中更好地满足新闻呈现的多样化需求。

  不久的将来,3D AI合成主播还会走出演播厅,支持外景播报和互动采访,为观众带来最前沿的新闻讯息。

  在5G全面铺展的新技术时代,随着分身技术落地经验的不断积累以及产品技术的突破创新,搜狗分身也会从传媒领域出发,快速向影音娱乐、医疗健康、教育金融等众多领域蔓延辐射,持续推动大众智能生活的建设。

文章免责声明:

本网站文章(含转贴文章)版权归原作者所有,所刊文章观点仅代表作者本人的观点,与本网站立场无关。如有侵权或其他问题,请联系我们,我们将在有效时间内处理,侵权等法律责任由上传者全部承担,与本站无关。

最新评论

登录之后发表您得观点!
  • 发布新帖

  • 微信

  • 手机端

  • 返回顶部