张掖大佛寺数字党项公主传递丝路文化灵韵|腾讯探元计划场景共建成果(二)设计
原标题:张掖大佛寺数字党项公主传递丝路文化灵韵|腾讯探元计划场景共建成果(二)
作为中华文化的重要组成,光彩绚烂的丝路文化在多民族交汇交融、历史更迭中孕育而生。河西走廊上的西夏王朝,这一以党项族为主体建立的王朝,创造了独特而灿烂的文明。随着王朝覆灭,西夏文化遗存渐失,成为“神秘王朝”。
甘肃的张掖大佛寺作为西夏皇家寺庙,是西夏文化的重要载体。900多年后的今天,腾讯探元计划2023支持下的“张掖大佛寺景区数字化体验项目”推出数字人虚拟IP——党项公主“云灼”,党项公主作为西夏王朝的成员,生活和事迹反映了当时党项族与其他民族之间的文化交流与融合,她的推出和互动,能够在一定程度上帮助游客更深入地理解不同文化在丝绸之路上如何相互影响和融合。
“云灼”在景区2024年元宵节文化活动上惊艳亮相,并现场与游客互动交流,探索传统与现代的文化交融之美,活动共吸引超过1万名的游客参与。
本次“腾讯探元计划”支持由联合国教科文组织、甘肃省政府和世界银行三方合作的甘肃省丝绸之路经济带文化传承与创新项目,促进甘肃区域文化科技的创新性发展。张掖大佛寺不仅是甘肃省的文化地标,也是佛教传入中国最早的地区之一,是丝绸之路上重要的历史名胜古迹群,在文旅场景有巨大应用价值,与本届探元的主题、目标、支持方向高度契合,成为腾讯探元计划扶持孵化的重点场景之一。
数字人是游客与文化交互的重要载体,党项公主“云灼”的构建一定要通过严密的文化历史考证、准确的技术复原。
党项族的人物特征、行为模式、服饰文化都只存在于历史文献中,无现存可参照。为了使“云灼”公主与历史吻合,探元项目共建方数字栩生团队深入研究历史文献和语言学知识,通过大量的史学材料考证和专家咨询,一步步搭建起了“云灼”这一个数字人的框架。
确定“云灼”公主的形象后,数字人面部的数据收集成为核心问题。西夏时期少女的长相更多是来自于壁画、文献等资料,她的详情信息如外貌、身高、体型等都需要大量的案头工作,在进行历史复原的同时还要兼顾现代审美,让文化以更具现代化的方式激活。
另外,在音容笑貌的复原层面若想要达到高度逼真的程度,不仅需要大量的数据和复杂的算法,并且需要跨学科的背景来确保这些元素复活的准确性。这无疑都给复原的工程带来了困难,他们也在还原的过程中一步步克服着这样一些问题,复原的过程大致上可以分为以下几个方面:
表情动作捕捉:首先从演员库中挑选一个外貌特征与党项公主平面图相似的演员作为参考,对这位选定的演员进行3D扫描,构成数字人模型的基础。
表情复原微调:人的脸上有40多块肌肉,表情多达3000多个,共建团队对扫描得到的3D数据来进行细致的矫正,这包括调整面部特征、表情和肌肉运动,过后又对数据来进行加权处理使之更贴近历史人物的特征。
身形、服饰:党项公主的服饰有一定历史和民族特殊性,探元共建方凌迪科技Style3D的数字技术首次将超写实服装实时动画系统融入到历史人物数字重现之中,为游客提供了丰富多样的传统民族服饰选择,真实还原丝绸之路上的服饰风采,巧妙地为游客打开了一扇通往党项、回鹘、裕固等丝路民族服饰文化的数字之门。
语气、动作、情感文化传达:数字人的外形还原之后,从游客见到她的那一刻起,云灼就不是一个科技载体,而是900年前的西夏王朝,是传递文化的党项公主,共建团队对于她的语气、动作、情感文化传达经过了大量训练: 1)基于现有的历史背景,艺术价值、制作流程与工艺等进行深入分析,专家团队及项目组精心设计党项公主本地知识库; 2)采用腾讯混元大模型结合本地知识库进行深度学习和训练,使云灼拥有“文化内涵”; 3)借助先进的大小脑智能融合平台,为云灼打造专属音色和语气,凸显云灼公主的身份和性格
共建团队介绍道:数字人的最终目标是尽可能地接近真实人类,无论是在外观、动作还是情感表达上,这里的外观包括皮肤的纹理、血红细胞的细节、微妙的表情变化、动作上的自然流畅,动作上符合党项公主的日常生活小习惯,情感表达要传递其中的文化色彩,无论从外形还是内核上都要“无限趋近于人类”。
数字人的外形和内核制作完成后,摆在共建团队面前的第二个问题是:如何构建一个数字场景让数字IP与游客产生交互,让文化的呈现与体验更为自然,在大量用户调研后,共建团队搭建了两个交互场景,分别是:基于全息展示柜的数字人交互和虚拟换装小程序。
以往游客在游览过程中,往往只是参观参观佛像、壁画,没有详细的信息和渠道去了解张掖大佛寺的文化,体验大大受限。
而探元计划项目组的尝试,通过“云灼”游客建立起一个文化交流场景,游客们通过和云灼互动交流,一步步进一步探索西夏文化、陆上丝绸之路的宗教文化、党项各民族风俗文化……在视觉,听觉,感觉、交互中得到多重个性化文旅体验,让神秘的“西夏王朝”有了可观、可言、可谈的具体形象。
她会俏皮的回答道:哇,看来你很了解大佛寺,那让我来告诉你大佛寺到底是哪三绝吧,一是这是国内保存最完整的西夏寺院建筑;二是这里拥有亚洲第一室内卧佛像;三是这里珍藏着亚洲最完整的明代手书金经《大般若波罗蜜多经》我是否有解答你的问题呢?本公主作为大佛寺的形象大使还算称职吧。
这个形象也离不开智能讲解系统的开发,系统融合了文化故事开发,客户的真实需求分析、AI模型集成、界面开发等关键步骤,确保“云灼”能及时并准确的响应用户的互动需求,并提供多模态的信息交互。
未来,同样的开发模式也能应用于不同的场景,仅需对特定领域进行单独训练,便能优化出更多与用户紧密互动的数字人物,拓宽其在多样化场景中的应用潜力。
在交互方面做的第二个尝试来自于“服装”,衣食住行本就是和人的生活息息相关的,服饰又是最能体现时代色彩和个人风格的外在载体,探元计划共建方“Style3D”数字服装解决方案首次从服装制作业迁移至文旅个性化消费场景中,通过全球领先的实时服装互动仿真技术,让游客在现场进行党项、回鹘、裕固等多民族虚拟服装的造型互动,亲身体验丝路民族服饰文化,让数字时尚与丝路文化融合生花。
甘肃张掖大佛寺文物研究所所长王康说道:通过这次数字化复原项目,引入“云灼”这一数字虚拟IP,让张掖大佛寺的故事有了更完整的呈现,有效提升了景区的文化价值;而且这一个数字场景是从0-1搭建起来的,在体验上也能给游客带来不一样的新鲜感、时代感和时尚感,景区围绕“云灼”开展了特色社教活动、研学旅游和个性化导览服务,让游客深刻感受到丝路民族间的交融与共生,加深了对中华民族共同体历史渊源和文化贡献的理解。