基于上下文的多通道语义融合

多通道交互已经成为人机交互领域一个重要的研究方向,对多通道输入的信息进行语义融合是其中的关键问题。提出了一种将上下文与传统语义融合相结合的方法,并将这一方法应用在面向儿童使用的讲故事原型系统中。儿童通过受限的自然语言、笔的勾画等方式进行故事创作。结果表明,笔和语音结合的多通道交互方式能够使得儿童更方便、自然地与计算机进行交互,结合上下文的语义融合方法能够在一定程度上修正输入错误。

Xiamen University, Xiamen, China; Xiamen Computer Federation; IEEE; IEEE Beijing Section; Chine Computer Federation