【环球网科技综合报道】近日,京东数科的工业AI公开课上出现了一位AI主播。 这也是京东数科自主研发的AI虚拟数字人产品首次出现在公众面前。 据介绍,京东数科结合了2D和3D技术,将传统方法与深度学习相结合。 它只需要几分钟的角色视频数据,经过几个小时的训练就可以合成一个写实风格的AI虚拟数字人。
在语音生成视频阶段,为了让AI主播的形象更加真实,京东数字AI实验室利用对抗生成网络还原更加真实的表情,并利用3D模型运动跟踪技术保证AI主播说话时嘴型和表情准确。 精致、自然的头部运动。
据了解,在AI算法的驱动下,“小妮”只需输入文字内容,就可以基于语义进行实时主持,表情、动作、语音表达都非常自然、逼真。
京东数科AI实验室首席科学家薄烈峰表示:“AI主播小妮的推出,是京东数科在多模态人工智能技术领域的成功应用。除了在客服、招聘等领域的应用,我们还将服务内容创作者,利用AI虚拟数字人技术,将静态图文内容转化为‘真人’讲述的短视频,满足用户多样化呈现形式的需求,增强用户粘性和社区活跃度。”