基于视觉的静态手势识别系统-计算机科学与技术专业论文.docx

Classified Index: TM391.41 U.D.C: 621.3 Dissertation for the Master Degree of Engineering VISION–BASED STATIC HAND GESTURE RECOGNITION SYSTEM Candidate: WangMaoji Supervisor: Associate Prof. WangXuan Academic Degree Applied for: Master of Engineering Specialty: Computer Science and Technology Affiliation: Shenzhen Graduate School Date of Defence: June, 2006 Degree-Conferring-Institution: Harbin Institute of Technology 摘 要 摘 要 I I 摘 要 人与计算机的交互活动越来越成为人们日常生活的一个重要组成部分。 特别是最近几年,随着计算机技术的迅猛发展,研究符合人机交流习惯的新 颖人机交互技术变得异常活跃,也取得了可喜的进步。 这些研究包括人脸识 别、面部表情识别、唇读、头部运动跟踪、凝视跟踪、手势识别、以及体势 识别等。 手势是一种自然、直观、易于学习的人机交互手段。手势识别按输入设 备不同可以分为基于数据手套的手势识别和基于视觉的手势识别。其中基于 视觉的手势识别以人手直接作为计算机的输入设备，人机之间的通讯将不再 需要中间媒体，用户可以简单地定义一种适当的手势来对周围的机器进行控 制。但是由于手势本身具有多样性、多义性以及时间和空间上的差异性等特 点,加之人手是复杂变形体以及视觉本身的不适定性,基于视觉的手势识别 是一个富有挑战性的、多学科交叉的研究课题。 本文设计实现了一个基于视觉的静态手势识别系统，该系统能够实时地 对从摄像头输入的 14 个常用静态手势进行识别，并通过识别结果控制幻灯 片放映。系统的设计准则一是实时性，二是准确性。在手势建模方面，采用 基于表观的手势模型；在手势分析方面，经过手势图像预处理和特征参数提 取得到八个手势特征参数；在手势识别方面，采用二次分类（粗分类和细分 类）的方法进行识别。 整个系统分三个部分实现。手势图像预处理部分，根据人体的肤色特征 从环境中分割出手区域，然后通过图像增强和拉普拉斯边缘提取算法得到手 势轮廓；手势特征提取部分，提取了八个手势特征参数，组成特征向量；视 频流实时处理部分，使用 VFW，通过回调函数对摄像头输入的视频流进行 计算，提取出单个静态手势图像，并进行实时地识别。 关键词 基于视觉的手势识别；实时系统；人体肤色特征； VFW 哈尔滨工业大学工学硕士学位论文 哈尔滨工业大学工学硕士学位论文 II II Abstract Human-computer interaction has played a more and more important role in human’s daily life. Recent years espacially, with the development of computer science, research on new human-computer interaction technology become extremely active, and advancement has been achieved. These research includes face recognition, expression recognition, hand gesture regognition, pose recognition and so on. Hand gesture is a natural and straight human-computer interaction method. There are two methods on hand gesture recognition, recognition based on data glove and recogniton based on vision. Take hand as the input equipment directly, communication between human and computer will need no more other intermediate media. Users can control the machines around simply sign to it with t