虚实交融,交互赋能|数字媒体艺术专业数字交互应用工作室数字交互游戏创新实践课程圆满结束

发布时间:2026年7月15日 14:18:30 浏览次数:

本学期,国际设计学院数字媒体艺术专业数字交互应用工作室开展为期八周的数字游戏创新实践实训课程。本次实训课程由工作室专任教师汪康一全程规划、统筹授课与技术指导,面向工作室全体数媒专业学生开展。实训课程突破传统纯软件游戏制作模式,引导学生探索数字游戏与实体交互装置融合的创新路径,结合VR设备、动作捕捉摄像头、体感传感器、玩具枪械改制的光枪交互设备以及融合传统皮影操控方式自主设计制作的实体交互手柄等多种输入媒介,探索身体行为、文化媒介与虚拟游戏系统之间的连接方式,完成从游戏机制设计、交互逻辑开发到硬件联动展示的完整实践。

本次实训课程采用“理论讲解+设备实操+团队研发+成果展示”的一体化教学模式,贴合数字媒体艺术专业艺工结合的培养特色。实训前期,汪康老师结合学生擅长视觉设计的专业特点,由浅入深开展教学讲解,通俗介绍摄像头动作捕捉、传感器体感识别、VR虚拟成像、实体光枪交互反馈等基础原理,结合行业优秀案例讲解沉浸式交互作品的设计思路,帮助学生建立物理设备与虚拟场景联动的基础认知,理清整体创作逻辑。


图片1.png

课外时间汪老师指导学生

图片2.jpg

上课时间汪老师指导学生


进入实操研发阶段,各学生团队围绕自身游戏主题开展交互方案设计、硬件原型制作、程序联调与体验优化。不同于传统游戏开发仅关注画面和玩法设计,本次实践更加注重玩家与游戏之间交互方式的创新。学生需要根据作品需求,自主选择合适的输入方式,并完成从硬件搭建、信号采集、数据传输到游戏反馈的完整开发流程。

在光枪射击游戏项目中,学生尝试将传统玩具枪械改造为具有互动功能的游戏控制设备,通过微型控制模块、触发装置与Unity游戏系统进行连接,实现射击行为向游戏事件的实时转换。研发初期,团队在硬件安装空间、触发稳定性、无线通信可靠性以及操作反馈等方面遇到了诸多问题。汪康一老师针对学生缺乏硬件开发经验的情况,从交互需求分析入手,引导学生逐步拆解问题,协助完成控制模块选型、电路连接、触发逻辑设计以及游戏端事件响应调试,并不断优化射击、命中反馈等核心交互流程,使学生理解实体设备并非简单替代传统键鼠,而需要围绕用户行为重新设计输入与反馈关系。


图片3.jpg

学生用传感器、VR设备、以及硬件设备联动制作的光枪手柄

在皮影交互游戏项目中,学生进一步探索传统文化媒介与数字游戏结合的新型方式,将传统皮影操控动作转化为游戏角色控制逻辑。项目研发过程中,团队针对不同输入方案进行了多轮测试与迭代,先后尝试多种传感方式,对操作灵敏度、动作反馈、结构稳定性以及玩家使用体验进行综合评估。汪康一老师指导学生从“技术可实现性”和“交互体验合理性”两个维度进行方案筛选,最终确定采用ESP32控制模块结合磁簧管与磁铁感应结构的交互方案,实现对皮影动作变化的稳定识别,并将实体操作映射至游戏角色移动、攻击等行为。


图片4.jpg

学生反复迭代传感器交互逻辑

通过持续测试、迭代和优化,学生逐步完成从创意构想到技术实现、从单一功能开发到完整交互体验构建的转变,提升了数字游戏开发、交互设计以及跨学科综合实践能力。


图片5.jpg

学生学习电烙铁焊接技巧

图片6.jpg

学生测试开发的VR游戏DEMO

经过数周打磨优化,本次实训圆满完成全部研发任务,并在工作室开展线下成果展示。本次参展作品最大亮点是摒弃鼠标、手柄等传统操控方式,依托摄像头捕捉人体动作、传感器记录运动轨迹,搭配VR设备构建沉浸式场景,结合实体光枪与虚拟场景实现虚实结合的交互体验,同时探索新型游戏输入方式与玩家行为之间的映射关系。体验者可在体验区域内完成抬手、瞄准、射击、换弹等真实动作,装置模拟射击反馈效果,虚实结合效果突出。

图片7.jpg

图片8.jpg图片9.jpg

图片10.jpg

图片11.jpg

汪老师带领学生进行测试

本次学生作品类型丰富,涵盖 VR 沉浸式体验、体感格斗、光枪射击、实体装置解密、皮影交互游戏以及摄像头识别互动等多个方向。其中,部分团队尝试将传统皮影操控方式转化为数字游戏中的新型交互输入方式,通过自制实体手柄实现传统文化媒介与现代游戏系统的连接,体现了数字媒体艺术专业在文化创新与交互设计融合方面的探索。同学们充分发挥数字媒体艺术专业优势,在场景设计、视觉表现、交互流程、游戏机制以及硬件联动等方面展开综合实践,实现了艺术表达、游戏设计与技术应用的融合。

图片12.jpg

图片13.jpg

学生作品展示——VR恐怖游戏《失真层》

图片14.jpg

学生作品展示——皮影戏装置2D肉鸽武侠游戏《影墟》

图片15.jpg

图片16.jpg

学生作品展示——基于体感的格斗游戏《苍穹之下》

图片17.jpg

学生作品展示——装置解密游戏《Here No Tree

图片18.jpg

学生作品展示——基于摄像头贴图生成、手柄交互和贪吃蛇模板的《SNAKE2048

图片19.jpg

学生作品展示——光枪游戏《回响纪元》

此次实训课程是学院数媒专业艺工融合教学的重要实践。在整个课程中,学生跳出了纯视觉设计的思维局限,熟练掌握了交互系统开发、硬件联动、游戏制作与体验优化等实践能力,树立了以人为本的交互设计思维。未来,数字交互应用工作室将持续深耕VR体感交互领域,开展更多优质实践项目,助力专业培养懂设计、懂技术、懂创新的复合型人才。

供稿:国际设计学院

编辑:郑思铭

审核:徐文东