文档下载 文档下载导航
设为首页 | 加入收藏
搜索 请输入内容:  
 导航当前位置: 文档下载 > 所有分类 > 工程科技 > 信息与通信 > 基于FPGA的课堂交互手势识别系统
侵权投诉

基于FPGA的课堂交互手势识别系统

3叶哉 2 0 1 3年第 2 6卷第1 2期 E l e c t r o n i c S c i .& T e c h ./ De c . 1 5.2 0 1 3

基于 F P G A的课堂交互手势识别系统 张慧杰,常文静,李佳 (西安电子科技大学本科生创新实践基地,陕西西安 摘要

7 1 0 1 2 6 )

手势是一种自然而值观的人际交流模式,基于视觉的手势识别是实现新一代人机交互所不可缺少的关键

技术。文中主要围绕手势识别展开,结合了手势-/ e, ̄ ' l和幻灯片系统的控制,定义了4种动态手势。通过抓捕手势移动质心,恰好避开了手势复杂多变这一缺点。以 F P G A作为主要的运行平台,结合 Ma t l a b的仿真,最终实现方便快捷的课堂交互的手势识别系统。 关键词人机交互;手势识别;F P G A;实时性;课堂交互 T P 3 9 1 . 4 1 文献标识码 A 文章编号 1 0 0 7— 7 8 2 0 ( 2 0 1 3 ) 1 2—1 4 1— 0 3 中图分类号

A FP GA- b a s e d Cl a s s r o o m I n t e r a c t i o n Ge s t u r e Re c o g n i t i o n S y s t e m

Z H A N G H u i j i e,C H A N G We n j i n g,L I J i a ( U n d e r g r a d u a t e I n n o v a t i o n B a s e,X i d i a n U n i v e r s i t y,X i’ a n 7 1 0 1 2 6,C h i n a ) Ab s t r a c t Ge s t u r e s a r e a n a t u r a l a n d i n t u i t i v e i n t e r p e r s o n a l c o mmu ni c a t i o n mo d e 1 .a n d v i s i o n . b a s e d g e s t u r e r e c o g n i t i o n i s a n i n d i s p e n s a b l e a n d k e y t e c h n o l o g y wh i c h c a n a c h i e v e a n e w g e n e r a t i o n o f h u ma n c o mp u t e r i n t e r a c -

t i o n. Th i s a r t i c l e c o mb i n e s g e s t ur e r e c o g n i t i o n

a n d t h e c o n t r o l o f s l i d e s h o w s y s t e m wi t h f o u r d y n a mi c g e s t u r e s d e - in f e d . Ar r e s t i n g g e s t u r e mo v i n g c e n t r o i d o v e r c o me s t h e s h o r t c o mi n g o f c o mp l i c a t e d g e s t u r e s . A c o n v e n i e n t c l a s s r o o m i n t e r a c t i o n g e s t u r e r e c o ni g t i o n s y s t e m i s a c h i e v e d wi t h F P GA a s t h e ma i n o p e r a t i n g p l a t f o r m c o mb i n e d wi t h MAT L AB s i mu l a t i o n . Ke y wo r ds h u ma n— c o mp u t e r i n t e r a c t i o n; g e s t u r e r e c o g n i t i o n; F P GA; t i me l i n e s s; c l a s s r o o m i n t e r a c t i o n

随着人与计算机的交互活动的不断增长,研究符合人际交流习惯的人机交互技术变得异常活跃,基于图像手势识别研究正是顺应了这一潮流¨ 。手势语言是一种靠视觉和动作进行交流的一种特殊语言,而基于计算 机视觉的手势识别技术应用于人机交互接口,具有用户友好、直接而有效等优点 J。若实现了手势对 P P T的控 制,能增加课堂的趣味性,实现课堂上灵活的交流、互动,并且促成一些新的应用,增强现有的人机交互模式。

是一种手势。敲击键盘不是手势,因为用手指的运动去敲击按键没有被观察,也不重要,他只表达的键盘被按下这一动作 J。本项目中定义的 4种动态手势集包括手势从左向右挥动控制 P P T向前翻页,手势从右向左挥动控制 P P T向后翻页,手势从上向下挥动关闭 P P T,手势从下向上挥动打开 P P T。 2 . 2图像处理仿真

由于 M a t l a b处理图像方便简单,选择 Ma t l a b作为仿真工具,进行一系列的图像处理,找出最佳方案后再移植到

硬件上。首先,我们用程序来截取视频中的帧图像。 但提取时间较长,一次存储 2 0 0多张图片并提取出进行读取处理。除此之外对背景的要求也较高,整个手势的图像要相对较亮。之后彩色 R G B图像约需要 1 m i n,而且 M a t l a b只能读取 a v i格式的视频,所以视频要事先经过格式转换,再用 M a t l a b对图像进行空间变换,然后进行二值化和均值滤波去噪处理后,得到的图像就较为理想。

1 课堂交互手势识别系统的总体设计 项目的目标是用摄像机在复杂背景下实时识别多种手势,根据给出的手势对计算机发出正确的指令,从而控制电脑上 P P T的播放。F P G A通过对图像进行采集,对手势进行分析、处理,运用图像处理的知识,实现对P P T的控制。

2软件仿真设计 2 . 1手势集的定义

手势是身体的运动,它包含一些信息。挥手道别 收稿日期:2 0 1 3 . 0 7— 0 5 作者简介:张慧杰 ( 1 9 9 l一),男,本科。研究方向:F P G A硬 件开发,数字图像处理。 E m a i l:x i d i a n z h a n g h j@1 6 3 . c o m

一日 露并蕊i 一 {抽照

图 1手势在视频中的提取 l 4l

W WW . dl anz i k p j i . or g l

基于FPGA的课堂交互手势识别系统

第1页

你可能喜欢

  • 手势识别算法
  • 手势控制
  • 交通手势
  • 指挥手势
  • 篮球手势
  • 裁判手势

热门文档

相关文档

  • 基于FPGA的实时手势识别系统

    基于FPGA的实时手势识别系统_信息与通信_工程科技_专业资料。第 24 卷第 11 期...手势识别是当下人 信方式的多样化交互模式 机交互领域的热点研究方向之一〔〕 3...

  • 基于FPGA的实时手势识别系统

    基于FPGA的实时手势识别系统_信息与通信_工程科技_专业资料。ARa-ieFG-aeetreontoytm...基于FPGA的课堂交互手势... 暂无评价 3页 3.00 一种基于FPGA的文字识别....

  • 基于FPGA的手势识别智能小车

    ? 4.2系统ISE框图 超声模块 ,WIFI模块,电机驱动模块 的RTL级电路 五、FPGA主...基于FPGA的智能小车设计 3页 2下载券 基于FPGA的课堂交互手势... 暂无评价 3...

  • 基于单目手势识别交互系统

    基于单目手势识别交互系统_电脑基础知识_IT/计算机_专业资料。基于计算机视觉的手势...基于FPGA的课堂交互手势... 暂无评价 3页 3.00 一种基于嵌入式系统实时....

  • 人机交互系统中动态手势识别的研究

    手势识别算法,并将之应用到基于Pc平台的AR系统中, 实现了人与机器的自然交互。...在 理论上,基于视觉的手势识别的研究都是一项极富挑战性的多学科交叉研究课 题...

  • 【论文】基于FPGA人机交互系统设计

    基于FPGA人机交互系统设计 结合基于FPGA图像计算机控制终端的设计,重点探讨了图像特征点识别、SOPC系统构架、USB鼠标键盘通信协议等关键技术和FPGA片上功能模块实现。该终...

  • 国家级大学生创新创业训练计划

    课堂交互手势识别系统 张慧杰 董维科 技术物理学院 2012 年 6 月至 2013 年 ...这 种结构正是 FPGA 的强项,而且 FPGA 的并行处理速度快,FPGA 可以有很快的 ...

  • 一种多点触摸GIS交互手势识别方法

    交互手势识别方法 行,根据手指的具体动作可定义为单点和多点手势、 触摸和移动手势,同时需要将手势映射到 GIS 系统中 的具体功能上,表 1 给出了系统中定义的...

  • 【论文】一种基于嵌入式系统实时交互的手势识别方法

    一种基于嵌入式系统实时交互的手势识别方法_专业资料。提出了一种在单摄像头条件下基于嵌入式系统的手势识别方法。通过拟合手势图的外接多边形,找出其所对应的手势缺...

  • 手势识别技术及其在人机交互中的应用

    一个精细有效的手势模型 ,使得 识别系统能够对用户所做的绝大多数手势做出正 ...手势分割 ( Gesture Segmentation) 是基于计算机 交互合多通道用户界面设计 。 )...

站点地图 | 文档上传 | 侵权投诉 | 手机版
本站所有资源均来自互联网,本站只负责收集和整理,均不承担任何法律责任,如有侵权等其它行为请联系我们.
文档下载 Copyright 2013 doc.guandang.net All Rights Reserved.  -  email