2023年国家级大学生创新训练计划项目结题：专属虚拟数字人生成软件
发布时间:2024-11-25 阅读次数:
立项年份：2023年
项目成员信息： 指导教师信息：
杨蕙绮-21级-437ccm必赢国际 温玉辉-副教授-智能图形
方安-21级-437ccm必赢国际
疏莹-21级-437ccm必赢国际
项目简介：
我们团队开发了AvatarU软件，利用先进算法和技术，为用户提供个性化虚拟形象生成服务。用户只需上传视频，即可创建具备情感表达的三维虚拟人物。
项目概况
AvatarU软件主要包含两大功能：
- 三维人体数字化身与姿势驱动：通过采用Instant Avatar模型，实现高质量的三维虚拟人建模。根据不同应用场景可以选择特定姿势驱动三维人体模型，并提供多种背景选择。
图 1 从smpl人体模型到数字化人物
图 2 “三维人体数字化身与姿势驱动”实现流程图
- 情绪驱动语音交互：实现不同情绪的人脸建模和情绪驱动的语音交互功能。虚拟人可模仿用户表情和声音，并通过百度文心一言语言大模型与用户进行智能对话。
图 3 赋予数字化人物8种不同情绪
图 4 “情绪驱动语音交互”实现流程图
科研价值与应用前景
AvatarU有着广泛的应用前景。我们的虚拟人不仅可作为中间产品，为其他产品制作提供帮助，还可应用于影视制作、游戏开发、教育等多个领域，推动虚拟人技术的发展。
项目创新点：
用户仅需一部手机即可进行数据采集。
采用最新算法，算力需求低，速度快。
提供定制化用户建模和情感引入。
项目成果：
我们的项目成果是AvatarU软件，目前正在申请软件著作权。