近日,在鼓浪屿艺术厅展出的“圣马力诺•厦门-双城世遗地摄影展”中,运用我校计算机与信息工程学院刘莉教授团队数字孪生技术打造的克隆数字人“小鼓”担任主播,带领观众沉浸式地体验两地灿烂悠久的文化遗产、自然风光和人文历史,新颖独特的导览方式一经亮相就引起各方关注和报道。
据悉,我校计算机学院刘莉教授团队研发的数字孪生技术经过多年培育攻关,实现了多个“实战”场景应用,在助力教育、医疗、文化等领域智能化转型方面取得了阶段性成效。作为福建省“百人计划”创新人才,刘莉教授于2012年带领人工智能团队启动数字孪生技术研究。该团队从最初的物体对象数字化,进化到对生产体系的准确模型化描述,从而打造出面向智能制造的数字孪生能力平台;同时,推进该技术向公共服务方向应用和改进。
作为元宇宙的底层支撑技术,数字孪生技术是利用数学模型去感知、理解、分析海量历史数据,以多物理量、多学科、多尺度、多概率的模拟过程,在虚拟空间中映射实体的整个生命周期。通俗地说,数字孪生就是在虚拟世界中对现实对象的精准描述和还原。经过10余年的探索,刘莉教授团队完成了理论算法和产业应用的突破。比如,对高精度数字人物的构建,就是数字孪生技术领域的一块“硬骨头”,在建模过程中,需要精确复刻人物表情神态、皮肤肌理、骨骼动作、语音表达等,甚至包括对人物知识体系、思维模式和情感表达的复刻,更需要综合运用深度学习理论和技术。
当前,元宇宙数字孪生技术正迅速渗透到各行各业,已经成为产业创新变革的重要驱动力之一。就在前不久,深圳市某院校率先集成使用了刘莉团队的算法技术来打造教学场景,这款教学“数字人”应用了行业领先的NLP算法、表情迁移和面部驱动技术,实现了精准的形象复刻和中英双语声纹克隆,成功解决了数字人对不同学科知识的感知和理解,使虚拟教师真正走进课堂、辅助教学。下一步,我校科研团队将进一步加强与企业的协同创新合作,共同突破元宇宙基础算力,打造元宇宙应用场景示范,积极推动三维数字空间、虚拟数字人和NFT数字资产在各领域的广泛应用。(宣传部、计算机与信息工程学院)

刘莉教授团队“数字人”技术图谱