“用户体验”在不同的时代有着不同的意义,现代用户体验的核心是“用户情感”。早期用户体验追求的“高效精准”成了现代产品设计的必要条件,优秀的产品设计会应用各种感官解决同一个问题;从多感官的角度出发,研究其在人机交互中的关联性是提升用户体验较为有效和新颖的设计方法。论文基于音乐游戏,以多维感官的沉浸式体验为背景,探索触屏设备交互设计中听觉、视觉、操作触觉的相互作用及其对用户体验的影响,具体研究内容如下:1.本文提出了“场”的概念源^[1],结合Unity3d、Unreal等引擎技术的发展,针对设计师,提出将视觉、听觉元素以及输入操作进行整合,重视交互逻辑、输入反馈（视觉、音效）、人机关系等的相结合的观点。2.论文基于交互设计的人机工程学、心理学的理论,探寻视觉、听觉内容以及交互手势之间的联系;以音乐节奏游戏为实践对象,研究了视觉、听觉、触觉内容的在Unity3d中的实现方法。3.论文重点研究了在一个交互系统中,视觉、听觉、触觉对用户体验的联合影响:用户发出的一个具体的交互动作,相应的视觉效果和音乐音效如何呈现,利用多种感官相互作用,最终达到交互系统沉浸式设计的目标,三者在交互设计中处于同等重要的地位。4.以人机工程学、心理学及音乐理论为理论依据,结合对成功案例的研究分析,利用unity3d物理引擎设计并开发一款基于Android平台移动终端的音乐节奏类游戏”Rhythm Spark”,通过用户体验反馈验证了论文提出的观点的正确性。论文利用实验心理学原理对游戏对象的属性进行定量分析,并用于程序脚本设计中,弥补了交互设计中定性分析的不足,从而使研究结果更有说服力;作者在实际的设计开发过程中,总结出适用于其他交互系统的设计方法,为更多的设计者和开发者提供参考依据;论文坚持研究理论与实际开发相结合,将设计、开发过程中具体入微的问题反补于理论,从而使理论研究更加完善。