摘要：人机交互(Human-computer interaction,HCI)在装备制造领域有着很大的应用潜力,然而,交互习惯的多样性和低识别率是制约其发展的主要因素。文章基于以上问题,构建了多模态的HCI框架,按照制造行业装备运用的需求,通过不同的模态来确定交互的目标,包括以非接触和不可穿戴的方式的注视、手指和语音等。提出了基于决策矩阵的融合策略,以提高系统的准确性,适应不同的交互习惯,该研究方法是以对交互用户及其相应动作未知的假设为前提。实验结果表明,该方法通过比较,在实际场景中具有更好的鲁棒性和实时性。