AI助力虚拟策展,中德师生研究成果亮相国际顶会 IEEE VR

近日,国际虚拟现实领域顶级学术会议——IEEE Conference on Virtual Reality and 3D User Interfaces(IEEE VR)在韩国大邱市落下帷幕。中德品牌学部艺术与科技专业师生团队的论文《Curating a Virtual Exhibition through Generative AI and VR Sketches》(通过生成式AI和VR绘图策划虚拟展览)被Poster Session录用,并在线下进行海报汇报展示。


 

中德品牌学部师生在韩国大邱市参会

 

Poster Session 展示安排

 

IEEE虚拟现实和3D用户界面会议

IEEE Conference on  Virtual Reality and 3D User Interfaces(IEEE  VR)


IEEE VR 由IEEE国际电气与电子工程师协会、IEEE计算机学会、IEEE可视化及图形学执行委员会主办,是中国计算机学会(CCF)推荐的A类国际学术会议。作为虚拟现实(VR)、增强现实(AR)、混合现实(MR)研究领域的国际顶级学术会议,IEEE VR创办于1993年,自2018年起与3DUI合并,每年吸引全球超过1000名顶尖专家学者参会,是XR领域学术研究与产业进展的重要交流平台。

 

研究成果

通过生成式AI和VR绘图策划虚拟展览

Curating a Virtual Exhibition through Generative AI and VR Sketches

 

大运河作为中国历史记忆的重要载体与文化创新的源泉,承载着丰富的文化景观与遗产。尽管文化机构已广泛采用数字技术促进文化传播,但现有方式仍以展示为主,缺乏沉浸式、互动性和情感体验。本文通过自传式设计方法,在VRChat平台中构建了互动虚拟展览“Canal Walk”,以艺术化表达与社交互动重构大运河文化地标。研究表明,该设计能够有效提升文化参与、再诠释与传播,为文化传承提供一种更整体化的新范式。

Scroll up for English version

The Grand Canal has long functioned as a vital carrier of historical memory and a source of cultural innovation in China, embodying rich cultural landscapes and heritage. While digital technologies have been widely adopted by cultural institutions to support dissemination, existing approaches largely emphasize presentation and lack immersive, interactive, and emotionally engaging experiences. In this paper, we present “Canal Walk,” an interactive virtual exhibition developed in VRChat through an autobiographical design approach, which reconstructs Grand Canal cultural landmarks with artistic expression and social interaction. Our work demonstrates how virtual exhibitions can enhance cultural engagement, reinterpretation, and communication, contributing to a more holistic paradigm for cultural transmission.

 

 

 

CanalWalk的空间规划和系统设计:(a-e)展厅和画廊;(d-g)互动机制包括寻宝、拍照和涂鸦创作;(h)在设计过程中使用OpenBrush绘制VR草图。

Scroll up for English version

The Space planning and system design of CanalWalk: (a-e) exhibition halls and galleries; (d-g) interaction mechanisms include treasure hunt, photo-taking and graffiti creation; (h) VR sketches using OpenBrush in design process.




论文第一作者姚锴向参会者展示项目Demo,并就论文海报成果进行交流讨论

 

研究团队选取了多个代表性城市的文化地标,使用TripoAI将图像转化为3D模型,并用OpenBrush和Blender优化材质与效果。项目在VRChat中发布,支持VR和PC端访问。在展馆设计中,团队针对不同地标采用了差异化的视觉处理方式,如光效、粒子效果、动态水纹等。

 

交互方面设计了四个阶段:触发(查看文化背景信息)、参与(寻宝收集)、巩固(虚拟相机拍照)、关联(自由涂鸦)。这些机制旨在帮助用户在参观过程中进行文化探索和自我表达。同时,论文也讨论了生成式AI在实际应用中的问题,包括模型生成质量不稳定、需要人工修复、以及可能带来的文化偏差等。

 

 

 

自2022年中德设计与传播学院创设艺术与科技专业以来,致力于培养能够进行前沿性研发和创作、艺术创意设计与数字技术开发能力兼备的跨学科、复合型、国际化人才。专业课程内容涉及数字信息交互设计、数字虚拟作品创作、人工智能赋能设计、数字互动娱乐等应用领域,侧重于对人与技术之间交互方式的探索、创新交互理念的研究,以及这些交互行为背后所涉及的人文与社会问题。

 

该论文入选IEEE VR会议,是学部师生在虚拟现实与文化展示交叉领域的一次实践探索。面向未来,中德品牌学部将继续依托国际化办学优势,推动艺术、科技与品牌设计的跨学科融合,鼓励师生在数字策展、智能交互、文化传播等方向开展前沿研究,持续产出高水平成果,在数字品牌与沉浸式体验领域形成特色发展方向。

 


zh_CN简体中文
滚动至顶部