日常物件增强现实音乐乐器

一个以日常物件为核心的增强现实音乐交互系统,将真实物体转化为可演奏、可感知、可表演的声音控制器,用于现场演出、具身即兴和探索式音乐表达。

UnityMeta Quest人机交互声音交互Pure Data
时间2026
地点澳国立大学 SMCCLab,堪培拉
负责内容增强现实原型、交互设计、声音映射
工具Unity、C#、Python、Meta Quest、Pure Data、研究方法论

项目概述

这个研究项目探索熟悉的日常物件如何在增强现实环境中成为音乐界面。作品主要通过一套精密的方法论配合技术实现来让真实物体成为音乐交互的中心:杯子、盒子或其他普通物件可以被识别、增强,并被作为具有空间行为和声音身份的乐器来演奏。

该系统作为 ANU SMCCLab 的研究型创意技术项目开发,结合增强现实视觉反馈、具身手势、物体可供性和实时声音合成,让音乐控制拥有清晰的视觉关系、触感线索和现场可读性。

设计与技术路线

系统由三个层次组成:Unity 构建的增强现实场景用于空间交互与视觉反馈;以物件为中心的交互模型将真实世界中的移动、接近和操作转化为音乐行为;声音层则通过实时合成和参数控制生成可表演的声音结果。设计重点放在“动作与声音的可读关系”上,让视觉运动、手势和音频反馈形成连续的表演语言。

最终展示将原型推进到现场演出语境中,使系统成为一个可被观看、理解和演奏的交互界面。作品连接增强现实、人机交互、创意编程和声音交互等方向,将界面设计、技术实现和表演思维组织进同一个完整系统。

项目亮点

查看 Poster PDF