摘 要
人机交互（Human-Computer Interaction）主要研究人、计算机以及彼此之间互相影响的有关技术。视觉语言（包括手势和面部表情）作为一种自然的人-人信息交互的辅助方式，具有所见即所得、自然方便等优点，因此在新一代“以人为中心”的智能人机交互中得到了广泛的关注。此次课题就是在这一方面做的一些尝试和探索，其中选择了基于手势的人机交互方式做研究，由于手势具有多样复杂性以及时空的差异性，因此，基于视觉的手势识别是一个极富挑战性的多学科交叉难题。 手势一般隐藏了一定的信息，我们需要对手势进行识别，得到其表达的含义，从而控制人机交互的实施。本文实现了一个利用视频手势提取进行人机交互的原型系统，大致可分为四个部分：视频采集和分离、图像预处理、手势提取和识别、人机交互。其中的关键部分是手势的提取和识别，手势提取需要采用图像处理的方法，而手势势识别采用的则是决策树的方法，通过对手势几何特征的分析和决策来判定手势类型。
采用以上方法对一段视频进行实时处理和分析，进而实现人机交互。其中主要的交互功能可以实现，实时性也较好，准确性也较高，不过该方法的鲁棒性不是很好，对光照强度较敏感。
关键词：人机交互，手势识别，图像处理，几何特征
Abstract
Human—Computer Interaction(HCI) is the technology of researching the interaction of human and computer, Visual language(gesture and face look) is a assistant human to human mutual method, it has the advantage of so called "what you see is what you get", and the most important is that it's a natural way. in view of these advantage, the researchers has put much focus on this aspect. the paper aims at doing some work on it. I select the item of HCI based on gesture recognition as my target. the gesture recognition is a challenging problem owe to the complexity and variety of gestures.
Generally speaking, The gestures contain some information in them, what we need to do is founding it. in this paper, it mainly involved the analyse of static gest
ure, and we must find the inherent clue, if we get it, then we can make use of it to control the HCI. in this paper ,the whole project can be separate into four parts: they are capturing and separating the video、image Preprocess、 acquiring and recognising the gesture 、the human computer interaction. the key part is acquiring and recognising the gesture. the gesture capture applys the theory of image processing, while gesture recognition applys the theory of decision-tree.
In the experiment, I acquired the video stream from a usb camera and processed it just as aboved approach. the final result is that it performed as we want. in a word, It’s a real-time system, the delay is in the control, and it has high accuracy too, But the robustness of the method is not very good, and it's much sensitive to light intensity.
KEY WORDS:human-comuter interaction hand gesture recognition
Image processing Geometry features
目 录
第一章 绪论
1.1 人机交互概述……………………………………………………………… 4
1.2 手势识别概述……………………………………………………………… 5
1.3 国内外研究现状…………………………………………………………… 6
1.4 本论文所做的工作及论文安排防喷器试压…………………………………………… 7
第二章 导尿管原理基于视觉的手势识别技术基础
2.1 手势建模………………………………………………………………….. 8
2.2 手势分割…………………………………………………………………… 11
2.3 手势分析…………………………………………………………………… 11
2.4 手势识别…………………………………………………………………… 12
2.5 本章小结…………………………………………………………………… 14
第三章 基于视频的人机交互设计
3.1 总体框架设计……………………………………………………………… 15
3.2 图像获取及预处理………………………………………………………… 16
3.3 手势提取和识别…………………………………………………………… 23
3.4 人机交互…………………………………………………………………… 28
3.5 本章小结…………………………………………………………………… 29
第四章 方案实现与结果分析
4.1 程序运行环境………………………………………………………………. 30
4.2 程序界面设计和主要功能…………………………………………………. 31
4.3 程序运行结果以及分析……………………………………………………. 36
4.4 本章小结……………………………………………………………………. 37
总结和展望………………………………………………………. 38
旗杆模型致谢………………………………………………………………. 39
参考文献…………………………………………………………. 40
第一章 绪论
1.1 人机交互概述
人机交互（Human-Comuter Interacton）是研究人、计算机以及它们之间相互影响的技术，人机交互技术是当前信息产业竞争的一个焦点，世界各国都将人机交互技术作为重点研究的一项关键技术，美国总统信息技术顾问委员会的“21世纪的信息技术报告”中[1]将“人机交互和信息管理”列为新世纪4项重点发展的信息技术(光模块安装还包括软件、可伸缩信息基础设施、高端计算)之一，它的目标是研制“能听、能说、能理解人类语言的计算机”。 我国国家自然科学基金会、国家重点基础研究发展计划(973)、国家高技术研究发展计划(863)等项目指南中，均将先进的人机交互、虚拟现实技术列为予以特别关注的资助项目。
热风锅炉
人机交互是随着计算机的出现应运而生的，它的发展经历着几个阶段：
(1)手工作业阶段，采用手工操作和依赖机器(二进制机器代码)的方法操控笨拙的计算机。
(2)作业控制语言和交互控制语言阶段，这一时期计算机的主要使用者是程序员，他们一般通过批处理作业语言和交互命令语言的方式和计算机打交道。
(3)图形用户界面(GUI)阶段，GUI的主要特点是采用了窗口、图标、鼠标、指针(WIMP)界面，具有简单，直接和所见即所得等优点。由于GUI简单易学，使得大量的普通用户开始接触计算机，促进了信息产业的空前发展。
(4)网络用户界面阶段，以超文本传输协议HTTP滚动车轮和超文本标记语言HTML为基础的网络浏览器是网络用户界面的代表。这类人机交互技术的特点是发展快、范围广，新的技术不断涌现，如聊天工具、搜索引擎等。
(5)多通道、多媒体的智能人机交互阶段，以虚拟现实为代表的计算机系统的拟人化和以手持电脑、智能手机为代表的微型化、嵌入化是当前计算机发展的两个趋势，而以鼠标和键盘为代表的GUI人机交互技术是影响其发展的瓶颈。可以利用人的多种感觉通道和动作通
道(如语音、手写、姿势、表情和视线等做输入)，以并行的方式与计算机环境进行交互，提高了人机交互的自然性和高效性。总体而言，人机交互的发展历史表明其由以计算机为中心的复杂交互逐渐向以人为中心的简单、自然交互转移。
豫公网安备41160202000603
站长QQ:729038198
关于我们
投诉建议