近日,江苏省文化和旅游厅公布了第三批江苏省文化和旅游重点实验室认定名单,我校牵头申报的元宇宙文旅场景应用技术研究江苏省文化和旅游重点实验室成功获批,是此次获认定的6家单位之一。
酿酒、学戏曲……这个实验室都能做
“这个实验室不得了!不仅能‘酿酒’,还能学戏曲!”参观完实验室的同学连连赞叹。
科学研究既要追求知识和真理,也要服务于经济社会发展和广大人民群众。为了让更多人能够学习和感受中国传统酒文化,我校人工智能学院的潘志庚教授带领团队开展了元宇宙下支持多模态交互的VR(Virtual Reality虚拟现实技术)酒文化博物馆项目的研发工作。
沉浸式博物馆VR环境
酒文化博物馆创造性地将VR和AR相结合,通过VR展示酿酒工艺发酵、蒸馏、陈酿、包装等过程;而AR(Artificial Reality增强现实技术)则利用人机交互,让用户能够亲手操作,身临其境地体验酿酒流程。
用户体验
与此同时,为了提升元宇宙交互的逼真性,潘志庚团队研发了一种多模态触觉感知与交互的数据手套系统。用户穿戴上这副“黑科技”数据手套,能够让交互场景中的虚拟手具有类似人手的动作行为和感知。
潘志庚团队研发的多模态触觉感知与交互的数据手套系统
“例如,当用户在交互场景中搅拌粮食时,手套就会发热,让整个体验过程更加逼真。”潘志庚解释道。
发酵(用户体验视角)
陈酿(用户体验视角)
在这里,体验者只需佩戴上智能设备,便能遨游在博物馆的海洋中,通过体感交互技术,“亲手”酿造一坛美酒。更令人惊叹的是,你还能“穿越”回唐朝,与“诗仙”李白展开一场跨越千年的诗词对话。
虚拟诗仙李白
实验室研发的酒文化博物馆中创新性地设置了虚拟诗仙李白,“‘李白斗酒诗百篇’,他是与中国酒文化和诗词文化密不可分的一个人物。因此,让李白作为‘代言人’,不仅能让大家体验、学习如何制酒,还能领会到中国传统诗词的独特魅力,兼具趣味性与教育性。”谈到设置人物的灵感来源时,潘志庚这样说道。
团队成员王文韵展示交互技术
此外,实验室还将VR运用在戏剧方面,数字化呈现昆曲、京剧、淮剧等多个剧种,让体验者身临其境地处在戏剧环境中。
“这样的话年轻人会对中国的传统戏曲更感兴趣。我们也正在进一步发展技术的可能性,也许不久的将来,大家就可以跟著名京剧演员‘隔空’对唱了。”潘志庚笑着说。
在潘志庚的设想里,实验室将在对戏曲的发扬方面大有可为。“打个比方,在影像技术还未成熟的过去,很多京剧专家只留下声音而未留下录像,但元宇宙技术给我们提供了弥补遗憾的可能性。未来,我们可以通过过去的京剧演员留下的照片,使用技术手段复原他们的表演,让他们在交互场景中‘活起来,动起来’。”
实验室也没有满足于目前的研发,“实验室团队对盐城的红色文化很感兴趣,也许将来会跟相关单位合作,建设红色文化虚拟博物馆!”潘志庚兴致勃勃地描绘着对未来的构想。
政产学研、校企共建
——这个实验室不一般
我校元宇宙文旅场景应用技术研究实验室创建于2022年,联合江苏大学艺术学院以及江苏奥格视特信息科技公司、朗辉科技集团有限公司两家文旅行业企业共建。
实验室全景
实验室在我校潘志庚教授的引领下,围绕元宇宙技术与文旅应用的跨学科的理论研究与综合应用,以中国元宇宙技术与应用创新平台、江苏省元宇宙工程研究中心及元宇宙智能穿戴昆山研究院等元宇宙特色的产学研机构为支撑,利用人工智能技术为游客提供个性化服务和智能化互动体验,增强旅游便利性和沉浸感,致力于通过数字化技术对文化遗产进行传承和保护,实现文旅智能化发展。
实验室负责人潘志庚教授
据悉,省文化和旅游厅重点实验室旨在加快形成我省文化和旅游领域新质生产力、把握科技创新发展新赛道、布局新兴产业和未来产业,充分发挥科技创新在文旅高质量发展中的支撑引领作用。
学科交叉,跨界融合
——这个实验室走在前列
在实验室构成上,潘志庚表示实验室集众家所长,“如联合江苏大学艺术学院做视觉设计,与江苏奥格视特信息科技公司、朗辉科技集团有限公司共同进行做策划、美工方面的工作。”
实验室里有来自不同学科的学生。软件工程专业出身的博士生郎旭谈道:“我硕士阶段主要学习数字媒体;现阶段则从事人机交互、VR、人工智能等方面的研究。在科技飞速发展的今天,跨界交流已成为推动科技创新的重要驱动力。”
开放式实验教学设备
由安徽建筑大学与南京信息工程大学联合培养、计算机专业硕士王文韵说:“在实验室我们可以选择自己感兴趣的课题研究。这个过程让我把本科阶段学习的课程融会贯通,也有了和其他元宇宙‘爱好者’共同交流、探讨的机会。”
工作中的王文韵
学科融合发展是时代浪潮的大势所趋,未来学科之间的交叉将会更加频繁、紧密。“元宇宙本身,即为多个学科交叉融合发展的产物。如果将所有学科的起源比作从零到一,那么学科之间的融合就是将可能性从一扩展到正无穷。”潘志庚说道。
我校也将以此为契机,继续充分发挥大数据、人工智能、气象信息技术等领域的研究优势,进一步推进跨学科创新研究,把科技成果应用在实现现代化的伟大事业中,服务文化和旅游业数字化转型。
穷理以致其知
反躬以践其实
戴上VR眼镜
触碰千年前的传统文化风韵
元宇宙文旅场景应用技术研究
江苏省文化和旅游重点实验室
精彩,未完待续