一种笔式用户界面软件领域模型及其应用

笔式用户界面软件以其自然、高效的交互方式，在很多领域中有着广泛的应用笔式用户界面软件具有以交互为中心、用户个性化需求高的特点，由此也决定了用户在软件设计中的主导地位“用户为中心的设计的关键问题在于，如何使用户的思想如实地反映到设计中通过建立笔式用户界面软件特征模型PUIDM(the domain model for pen—based user interface software)，构造了一个连接用户与软件设计的平台．从上下文、软件实体、界面特征、体系结构等角度，对该模型的建立进行分析．并给出了相应的XML描述在此基础上，描述了用户使用该模型进行软件设计的过程实例表明，PUIDM能够正确引导用户进行设计，将用户意图充分地引入到软件设计和最终实现中，使软件满足可用性要求。

CoPenML:基于XML的笔式用户界面构件体系结构

笔式用户界面在许多领域得到了广泛应用，但现有的笔式界面技术不能支持高层次、多领域的可视化界面制作，很难实现面向软件构件的重用．因而提出一个新的解决方案，面向构件的体系结构CoPenML．该方案基于XML语言抽象描述了笔式界面的配置组成．可用于快速生成界面原型及二次开发接口，并且在系统实现级以及场景图级两个层面上实现软件构件的重用．设计了CoPenML的体系结构并给出了界面描述语言规范．最后开发了基于CoPenML的笔式界面制作环境以及相关工具．结果表明该方案对于笔式用户界面制作是十分有效的．

PIBG Toolkit:一个笔式界面工具箱的分析与设计

PIBG Toolkit是一个基于PIBG交互范式构造而成的笔式应用开发平台:PIBG Toolkit中包含了纸、框等多种交互组件，定义了纸、框和内容三个层次之间的静态结构和动态机制: 开发者开发笔式交互系统时，可以用PIBG Toolkit来建立整体的软件框架和交互机制，并有选择地在系统中添加Toolkit中所提供的交互组件.这样，开发者的精力将会集中在应用领域的内容上.目前，基于该平台已经开发出多个具有很好应用前景的笔式应用系统.

一种新的笔式交互范式的可用性评估

笔式用户界面是Post-WIMP界面的一种重要形态，具有自然、和谐的交互特性。尽管笔式用户界面广泛应用于无处不在计算环境中，但很少专门对它的可用性进行评估。针对笔式用户界面的特征，提出了一种新的笔式用户界面范式，基于此范式设计并实现了一个面向教学的笔式交互系统(PenOffice)，利用此系统对范式从易学性、效率、出错率和用户满意度这几个方面进行了可用性评估，从中分析了笔式用户界面以及这种新的界面范式的优点和不足。

Post-WIMP界面隐式交互特征研究

首先从认知心理学的角度对Post—WIMP界面下的隐式交互特征进行分析和描述。然后通过对传统界面的交互任务生成结构和Post—WIMP界面的交互任务生成结构进行比较,分析Post—WIMP界面交互任务的生成特点。根据这些特点提出了利用识别技术、上下文感知技术和用户修正技术(User Mediation)相结合的方法来支持Post—WIMP界面的隐式交互，并构造了Post—WIMP界面的交互任务生成框架。这些隐式交互特征的研究将为建立Post—WIMP界面软件框架和交互平台提供底层支持。

the tilt cursor: enhancing stimulus-response compatibility by providing 3d orientation cue of pen

In order to improve stimulus-response compatibility of touchpad in pen-based user interface, we present the tilt cursor, i.e. a cursor dynamically reshapes itself to providing the 3D orientation cue of pen. We also present two experiments that evaluate the tilt cursor’s performance in circular menu selection and specific marking menu selection tasks. Results show that in a specific marking menu selection task, the tilt cursor significantly outperforms the shape-fixed arrow cursor and the live cursor [4]. In addition, results show that by using the tilt cursor, the response latencies for adjusting drawing directions are smaller than that by using the other two kinds of cursors.

crossmodal error correction of continuous handwriting recognition by speech

In recognition-based user interface, users’ satisfaction is determined not only by recognition accuracy but also by effort to correct recognition errors. In this paper, we introduce a crossmodal error correction technique, which allows users to correct errors of Chinese handwriting recognition by speech. The focus of the paper is a multimodal fusion algorithm supporting the crossmodal error correction. By fusing handwriting and speech recognition, the algorithm can correct errors in both character extraction and recognition of handwriting. The experimental result indicates that the algorithm is effective and efficient. Moreover, the evaluation also shows the correction technique can help users to correct errors in handwriting recognition more efficiently than the other two error correction techniques.

基于场景方法的笔式界面软件设计工具

为缩短的笔式用户界面软件的开发周期,让设计人员对软件的整体构思在开发过程中得以保持,提高团队人员的交流效率,提出了有关笔式界面软件的文档描述规范PUIML(pen-based user interface modeling language),并设计实现了一个笔交互的笔式用户界面软件设计工具。以笔式操作平台为软件平台,以PUIML为数据模型,采用基于场景设计的开发方法,为设计人员和用户提供自然的纸笔交互方式,设计结果形成PUIML形式的文档,通过主控程序执行。实践结果表明,使用PUI Maker可以解决笔式用户界面开发中存在的以开发人员为中心,原始设计与开发结果不一致等问题,提高了笔式界面软件的开发效率。

协作笔式用户界面开发工具研究

笔式用户界面是一种重要的Post-WIMP(window icon menu pointer)界面,它给用户提供了自然的交互方式.然而,当前的笔式用户界面工具箱大多是面向单用户任务的,不能很好地支持协作应用场景.通过对笔式交互特征和协作环境功能需求的分析,设计并实现了一个工具箱CoPen Toolkit,用于支持协作笔式用户界面的开发.它提供了灵活的架构和可扩展的组件,支持笔迹描述、事件处理和网络协作等功能.基于CoPen Toolkit,构造了多个原型系统,实践表明,它能够很好地支持协作笔式用户界面的开发.

自适应笔式用户界面开发的概念框架

提出了一个指导自适应笔式用户界面开发的概念框架CFAPUI(a conceptual framework for developing adaptive pen-based user interface).该框架详细描述了自适应笔式用户界面的软件体系结构,阐述了自适应笔式用户界面的软件体系结构中的各组成模块及其相互间的关系.同时,在体系结构的基础上提出自适应笔式用户界面开发时的具体过程步骤和方法,并通过一个笔式表单应用来说明该开发框架在指导自适应笔式用户界面开发中的具体应用.

基于知网的文本推理

文本推理在自然语言处理的应用中占有极为重要的位置,本文介绍了基于知网的一种推理方法,该方法以语义网络的形式表示知网中的知识,利用“标记传递”实现推理。其特点是引入构造-融合模型的思想,动态生成知识结构,有引导地在文本词汇间建立推理路径。利用16种推理类的实例对其进行测试,结果表明在有足够上下文的条件下,该方法能够得出较为理想的推理,并且代价不高。

基于场景树的笔式用户界面设计

从增加笔式用户界面的可用性和提供自然、方便的交互操作的角度,提出一种使用场景树的界面设计方法,并将该方法用于管理会议系统相关环节,包括会议过程、查询和阅读会议文档、记录等.

UIDT:一种基于摄像头的用户界面模型

为了弥补WIMP界面模型对视觉交互描述的不足,提出一种基于视觉交互的用户界面模型.首先在分析和总结视觉交互过程的基础上,以活动理论为基础,提出一种以用户为中心、面向任务和基于事件驱动的用户界面模型;然后描述了该模型的组成结构及其相互关系;最后给出了一个基于此模型的视频手势交互系统实例.实验结果表明,该模型能够有效地支持视觉交互设计,使用户界面满足可用性要求.

基于TUI的场景规划系统中的交互技术

单摄像头条件下,基于桌面TUI,划分出4类具有不同场景语义的用户界面操作实物;分析实物用户界面中执行通用交互任务的特点,建立支持4类语义的3层系统设计框架;结合场景规划系统自身特征,设计了4类承载上述场景语义的标记,并提出标记任务分配策略;为解决大场景与小视域之间的矛盾,结合paddle技术,提出动态比例空间、动态成组、双手交互和遮挡处理等交互技术;借鉴认知心理学原理,提出时空复用交互技术;开发基于TUI的交互工具箱,并进行了应用验证.