论文纲要：假造情况中多通道琼斯指数称归纳本领的接洽与实行

多通道人机交互是进步人机交互本领的典范代办，它充溢运用人的多种发觉通道和疏通通道，用并行办法与计划机体例举行交互，以普及人机交互的天然性和高效性。普遍的，多通道人机交互中指称归纳是指估计与通道琼斯指数称对立应的指称东西。它波及多通道调整须要面对的要害题目，也是感化用户企图领会的重要成分。多通道人机交互是他乡共同假造安排与假造创造体例VEADAM（Virtual Environment Aided Design and Manufacture） 的要害构成局部，个中贬低引导朦胧性、估计未指明消息和多通道对齐是多通道人机交互指称归纳须要处置的题目。本舆论提出了一种假造情况中的多通道琼斯指数称归纳本领RRVE（Reference Resolution in Virtual Environment）。该本领领会了认知状况与通道琼斯指数称之间的联系，给出了交互东西的四种状况空间：引导、聚焦、激活和宁静，依照认知状况等第分阶段举行指称的归纳。运用配合因变量展现指称东西认知状况、语义和功夫等上面的感化，同声经过感知形势贬低三维交互的引导朦胧性。本舆论在VEADAM中安排并实行了RRVE。开始结构了一个鉴于语音和肢势的多通道界面，实行了工作制导的多通道分层调整模子，而后采用语音启动的调整战略，运用RRVE举行指称东西的采用。经过碰撞检验和测定记委派户与东西的交互进程，天生感知形势须要的百般统计量。试验截止表白：RRVE不妨估计未指明消息、扶助多通道对齐和贬低引导朦胧性，而且从指称归纳的胜利率和对交互的感化度两个上面给出了RRVE和Greedy本领的比拟截止。