论文部分内容阅读
本课题通过研究增强现实中的多模态交互方式,构建增强现实系统的结构模型,选取HoloLens增强现实眼镜设备作为开发对象,对汽车维修辅助系统进行设计实践。本课题首先对增强现实技术、多模态交互技术和汽车自主维修技术的国内外研究现状进行了介绍,分析了这三个技术的优势与不足。其次,从多模态信息的呈现类型、多模态交互的特点与优势两个方面对多模态交互理论展开研究,提出多模态整合用于降低用户认知资源竞争的方法。研究增强现实系统的关键技术,对显示技术、注册技术和交互技术的实现原理和研究成果进行分析,根据各自的主要特点选取相应的使用场景。最终,基于以“任务”为交互的核心线索,以“时间”为各模态间联系的纽带的思想,构建多模态增强现实交互模型。针对汽车自主维修领域的用户需求进行分析,通过用户的特征描述、维修场景分析和用户行为分析建立用户模型,明确系统的信息架构与功能。设计实验对用户在增强现实下的视觉分配机制进行探究,记录用户实验过程中的眼动数据,对注释频率和视觉停留百分比两项数据进行分析,提出增强现实下界面信息元素布局的原则。最后,选取汽车维修技术手册为案例,从信息架构和交互方式两个方面完成汽车维修辅助系统设计。本课题的研究提出面向任务构建多模态增强现实模型的方法,为增强现实技术在其他领域应用的交互设计提供了参考。运用眼动实验分析增强现实下信息元素对人视觉注意力分配的影响,适用于指导其他界面信息布局的设计。