• / 61
  • 下载费用:10 金币  

基于多传感器信息检测和融合的中国手语识别研究[1].doc

关 键 词:
基于多传感器信息检测和融合的中国手语识别研究[1].doc
资源描述:
基于多传感器信息检测和融合的中国手语识别研究[1]5 期 中国生物医学工程学报 Vol. 29 No. 5 2010 年 10 月 Chinese Journal of Biomedical Engineering October 2010 基于多传感器信息检测和融合的中国手语识别研究王文会陈香*阳平李云杨基海 (中国科学技术大学电子科学与技术系,合肥 230027)摘要:有效融合加速计、摄像头和表面肌电 3 种低成本传感器在手势动作信息捕获上的优势,是提高手语手势识别率和种类的重要研究内容。提出一种基于多传感器信息检测和融合的中国手语识别方法 :先利用表面肌电的幅值信息,对 3 类传感器信号进行手势分割,并实现单双手词的划分 ;然后借助视觉信号,完成有遮挡和无遮挡双手词的划分 ;最后利用 Sugeno 模糊积分,实现不同特征匹配结果的决策融合。结果表明,对 4 位受试者、201 个高频手语词开展手势识别实验,其识别率均在 99%以上,证明该基于多传感器信息检测和融合的手势识别方法在中国手语识别上的有效性。关键词 :手语识别 ;多传感器融合 ;隐马尔科夫 ;模糊积分中图分类号 TP391. 4 文献标识码 A 文章编号 0258-8021(2010)05-0665-07 Chinese Sign Language Recognition Based on Multiple Sensors Information Detection and Fusion WANG Wen-Hui CHEN Xiang* YANG Ping LI Yun YANG Ji-Hai (Department of Electronic Science and Technology,University of Science& Technology of China,Hefei 230027,China) Abstract: The efficient fusion of hand gesture information captured by a three-axis accelerometer,a webcam and four surface electromyography sensors is an important research field for improving the performance of sign language recognition system. In this paper,a multi-sensor information detection and fusion method was proposed. Firstly,the amplitude information of myoelectric signal was utilized to extract active segments of hand gestures and divide sign gestures into single-hand type and double-hand type. Then double-hand sign words were further classified into occlusion or non-occlusion class by vision signal. Lastly,decision-level fusion approach with Sugeno fuzzy integral was applied on local matching results of multiple classifiers for improving classification performance. Experimental results for 201 high-frequency sign words from 4 signers obtained the classification accuracy of more than 99%,indicating the effectiveness of the proposed method for Chinese sign language recognition. Key words:sign language recognition; multi-sensor fusion; hidden Markov model; fuzzy integral引言手语识别研究的目的,是使计算机能够正确理解手语,并将手语转换成容易理解的语音或者文本信息,以增进聋哑人与健听人之间的无障碍交流[1] 。同时,手语手势识别研究有助于促进智能人机交互技术、虚拟现实和
展开阅读全文
  微传网所有资源均是用户自行上传分享,仅供网友学习交流,未经上传用户书面授权,请勿作他用。
0条评论

还可以输入200字符

暂无评论,赶快抢占沙发吧。

关于本文
本文标题:基于多传感器信息检测和融合的中国手语识别研究[1].doc
链接地址:https://www.weizhuannet.com/p-9478390.html
微传网是一个办公文档、学习资料下载的在线文档分享平台!

微传网博客

网站资源均来自网络,如有侵权,请联系客服删除!

 网站客服QQ:80879498  会员QQ群:727456886

copyright@ 2018-2028 微传网络工作室版权所有

     经营许可证编号:冀ICP备18006529号-1 ,公安局备案号:13028102000124

收起
展开