阿里云推出数字人视频生成工具Live Portait

8月16日消息，阿里云推出数字人视频生成工具Live Portait，上传一张照片和一段文本或语音即可生成一段开口说话的数字人视频，可应用于视频直播、聊天机器人、企业营销等场景。目前，该工具已在魔搭社区创空间开放体验。

根据魔搭社区上的信息显示，在Live Portait上传照片后，用户可选择文本驱动和音频驱动两种方式，文本驱动模式下，该工具提供了普通话、英语、粤语、童声等28种声音。

截自魔搭社区

这次上线的Live Portait工具由运动模块和生成模块组成，采用阿里云自研的口型预测算法，生成的口型准确度相比传统方法大幅提高。在训练阶段，Live Portait增加了姿态的显式控制，不需要底板视频也可以生成任意动作的视频，大幅提升数字人说话的真实感。此外，通过眼神主动控制技术，Live Portait可以为眼球增加一些自然运动，使得生成结果在观感上更接近真人效果。据介绍，Live Portait相关技术已被CVPR、ICCV等国际AI顶会收录。

该工具算法负责人张邦表示：“Live Portait集成了团队多项自研创新技术，例如仅需单张图片就能生成逼真的面部动画，突破了传统对抗生成网络的局限。随着技术的进一步迭代，图生视频有巨大的应用空间，有望成为企业降本增效的生产工具。”

据悉，该团队研究方向涵盖数字人、3D模型AI生成、高真实感渲染、自然人机交互等领域，目前已发表50多篇国际顶会论文。

截自魔搭社区

阿里巴巴集团近日公布2023年六月底止季度业绩。其中，云智能集团（包括阿里云及钉钉）收入增长4%至251.23亿元，经调整EBITA利润增长106%至3.87亿元。财报显示，阿里云本季度收入增长主要受到存储、网络和AI计算相关产品驱动，部分被CDN需求正常化抵消增幅。从客户分布维度，收入增长主要受到金融服务、教育、电力和汽车行业驱动，部分被主动缩减项目式收入的举措所抵消。

报告期内，阿里云正把促进大模型的生态繁荣作为首要目标，积极发展大模型的开源社区。财报透露，截至7月底，旗下魔搭社区集聚了200多万AI开发者、1000多个优质AI模型，模型累计下载总量超过4500万。

截自阿里巴巴2023年六月底止季度业绩公告