多通道用户界面开放模型的研究及应用
文献类型：学位论文
| 作者 | 李茂贞 |
| 学位类别 | 博士 |
| 答辩日期 | 1997 |
| 授予单位 | 中国科学院软件研究所 |
| 授予地点 | 中国科学院软件研究所 |
| 关键词 | 用户界面 用户界面概念模型 对话独立性 用户界面模型 多通道用户界面 交互风格原语 交互概念原语 交互任务原语 应用原语 原语映射 通道整合 用户界面评估 |
| 学位专业 | 计算机软件 |
| 中文摘要 | 近年来，计算机输入输出装置在数量和能力上迅速增加，但计算机加工和呈现视觉、听觉信息的能力和人机交互能力是不相称的，从计算机到用户的通讯带宽要比从用户到计算机的通讯带宽大得多。这种不相称来自于硬件的限制和人的交互通道与对象操作间的不匹配。另外，虚拟现实技术、科学计算可视化对计算机系统的人机交互提出了高效、三维和非精确的要求，而现有的交互方式能胜任二维操作但缺乏空间中进行非精确直接操作对象的能力。要从根本上改变人机交互现状，必须发展从用户到计算机之间的快速、高效的多通道用户界面（Multi-modal Interface, MMI）。目前，MMI 已成为用户界面研究的重点。MMI 采用视线跟踪、语音识别、手势输入等新的交互技术，允许用户利用多个交互通道并行、非精确方式与计算机系统进行交互，旨在提高人机交互的自然性的高效性。MMI 是继命令行界面(Command LIne Inteface, CLI) 、WIMP （窗口、图符、菜单、指点）界面之后的新一代用户界面。论文围绕多通道用户界面这一课题进行了研究，论文的主要工作包括以下几个方面：1．用户界面的概念模型 本文提出了CLI、WIMP界面及MMI这三类用户界面的概念模型，并对它们进行了比较。比较结果表明，无论从用户到计算机的输入带宽，还是计算机到用户的输出带宽，MMI比CLI、WIMP的人机通讯带宽都提高了很多。因此MMI是用户界面的发展趋势。2．多通道界面开放模型PBM_MMI PAC模型和Arch 模型分别为基于Agent的用户界面模型和结构化界面模型的典型代表。本文将 PAC 模型中的PAC Agent 嵌入到Arch模型中的各个部件中，提出一种基于交互原语的多通道界面开放模型PBM_MMI。该模型能很好地满足MMI的各方面要求，体现了交互系统的纵向角度、横向角度分解的思想，从而简化交互系统的开发。3．PBM_MMI中原语的使用 原语是知识的一种表示方法，其好处在于表达方式的简洁性及语义的完整性。在PBM_MMI中使用了四级原语即交互风格原语ISP、交互概念原语ICP、ITP到DAP， 交互系统能逐步理解用户的交互意图。因为不同的ISP可以映射为同一个ICP，因此PBM_MMI易于扩充交互通道。同时关联ICP的使用使得多个ICP语义整合成为可能。由于PBM_MMI具有各个ICP的语义信息及整合规则，因此PBM_MMI可以支持多个交互通道的使用及信息的非精确性处理。而原语使用者PAC Agent使得PBM_MMI可以支持信息的并发处理。这样，PBM_MMI允许用户使用多个交互通道以并行、非精确的方式与系统进行交互。4．PBM_MMI中的PAC Agent PBM_MMI中使用了几类PAC Agent。 每类PAC Agent都赋予了一定的处理能力，各个PAC Agent之间通过消息传递进行通讯，PAC Agent只接收自己感兴趣的消息，因此通讯效率得到提高。PAC Agent是独立的运行单元，多个PAC Agent可以并发处理。这样，一个交互系统就可以分解为多个PAC Agent的运行，本文利用BNF范式对进行了定义，为PAC Agent的实现提供了一个框架结构。5．PBM_MMI中原语映射表的实现 PBM_MMI使用了几类信息表用于实现原语之间的映射。按照本论文中提出的操作语法定义，可以对这些信息表进行一定的操作如增加、删除、查询、修改，以便使它们适应不同的环境。6．MMI的评估机制 由于MMI主要体现了界面表现及人机交互两个方面的内容，因此本文从这两个方面出发，并结合MMI的特点，提出一种MMI的评估机制。该机制能够对整个MMI进行定量评估。7．PBM_MMI的应用 基于PBM_MMI，我们设计了具有多通道界面特点的原型系统 VoiceDraw。这是一个语音驱动的绘图代理。在VoiceDraw中，用户可以使用手势和语音两个交互通道以并行、非精确性方式和系统进行交互。VoiceDraw体现了用户和计算机系统交互的自然性和高效性，同时也验了PBM_MMI的有效性。并且利用本文提出的MMI评估机制。对VoiceDraw进行了定量评估。本论文的研究是国家自然科学基金重点项目“多通道用户界面研究”中的一部分工作。 |
| 语种 | 中文 |
| 公开日期 | 2011-03-17 |
| 页码 | 96 |
| 源URL | [http://ir.iscas.ac.cn/handle/311060/7246]  |
| 专题 | 软件研究所_中科院软件所_中科院软件所 |
| 推荐引用方式 GB/T 7714 | 李茂贞. 多通道用户界面开放模型的研究及应用[D]. 中国科学院软件研究所. 中国科学院软件研究所. 1997. |
入库方式： OAI收割
来源：软件研究所
浏览0
下载0
收藏0
其他版本
除非特别说明，本系统中所有内容都受版权保护，并保留所有权利。