基于移动终端汉语手语识别技术探究

基于移动终端汉语手语识别技术探究摘要:文中使用图像轮廓填充图形作为手语手势的特征参数进行静态手语识别。关键是提取出图像边缘轮廓,并做出轮廓填充图形,根据这个特征参数对待测图像进行手语手势的特征匹配。该方法对图像亮度、缩放、平移、旋转具有不变性,而且该方法计算简单、快速,可以用于基于移动终端(Android手机操作系统平台下)的手语识别系统。关键词:手语识别图像轮廓匹配移动终端中图分类号:TP391.4文献标识码:A文章编号:1672-3791(2012)07(a)-0024-02随着计算机技术和通信技术的迅速发展,多模式人机交互技术研究也有很大进展。手语识别作为多模式人机交互技术的重要研究方向,其主要目标是使特殊用户(例如聋哑人)可以用更加方便、自然和符合其生理特点的方式来使用计算机、手机等现代化信息设备。总之,手语识别的研究和实现不仅是一门有价值的研究课题,而且具有更加广泛的社会意义和实际应用前景。目前这种方法对图像的亮度、缩放、平移、旋转具有不变性,具有很高的识别率,而且识别快速、方便。其缺点在于只能处理静态的单个的手语图像。但相比以前的电脑平台下的手语识别,这种方法更加的方便,用很广阔的前景。据国外媒体报道,美国华盛顿大学的工程师正在测试一款名为Mob订eASL的工具,这款工具能利用运动感知技术去识别美国手语,并通过手机发送图像。这是目前唯一可查的研究手语识别技术在移动终端应用的项目。1手语识别建模与实现通过移动终端(这里主要指手机)获取一幅待测图片,经过预处理后提取图像轮廓填充图形作为特征参数,将特征参数与标准库进行对比,从而识别出改图片对应的手语含义。原理与模型如图1所示。通过手机获取26张“A-Z”标准手语手势的图片,针对每张图片我们采取以下处理步骤,以建立标准库:获取图片一灰度处理一图像裁剪。本文采用canny算子进行边缘提取。Canny算子是一个具有滤波、增强、检测的多阶段的优化算子,在进行处理前,Canny算子先利用高斯平滑滤波器来平滑图像以除去噪声,Canny分割算法采用一阶偏导的有限差分来计算梯度幅值和方向,在处理过程中,Canny算子还将经过一个非极大值抑制的过程,最后Canny算子还采用两个阈值来连接边缘。对提取的图像边缘进行填充,得到图像边缘轮廓填充图形。将待测图像的填充图形在旋转-15。〜+15。条件下与标准库参数进行对比,以得到的相关系数最大的角度下的图像作为识别结果。这样就能解决因图像旋转而造成的识别错误的问题。弥补了边缘方向角直方图参对数旋转敏感的不足。2仿真实验结果与分析根据上面所述方法,文中采用如图所示的手语识别系统进行实验。实验以白色为背景,用数码相机采集手语的手势图片,釆用不同的光照,拍摄了26种不同手势,将待识别的手语图片建立了一个小型的静态手语库,图像大小归一化为512X512,其中一部分作为训练使用。通过以上的实验我们得出,在手机环境下手语的识别是可以实现的。在对26个英文字母的手势的测验中,19张手语手势可以识别为最相似目标,5张手语手势可以识别为次相似目标,2张手语手势不可以识别,识别率为92.31%。与以往的手语识别方法相比较,这种方法更加的方便,简单。但与此同时,这种方法也有其自身的缺点,它只适用于静态的,单个的手语手势。3结语文中的创新点是结合采用图像边缘轮廓图形这个特征参数进行静态手语识别。图像边缘轮廓图形的特点是对图像旋转不敏感。该方法计算简单、快速、识别率高。本文的另一个创新点是基于移动终端的手语识别。充分利用了3G手机的极高的数据传输速率的特点,以及支持多媒体通信的优势,因而该技术具有潜在的巨大的现实意义。参考文献[1]郭彩龙•中国静态手语识别的研究[D]•硕士论文,西安建筑科技大学,2009.[2]翟俊海,赵文秀,王熙照•图像特征提取研究[D].河北大学,2009,1.[3]VonAgrisU,ZierenJ,CanzlerU,etal.Recentdevelopmentsinvisualsignlanguagerecognition[J].UniversalAccessintheInformationSo-ciety,2008,6(4):323〜362.[4]胡友树•手势识别技术综述[J]•中国科技信息,2005(2):42.[5]张良国,高文,陈熙霖,等•面向中等词汇量的中国手语视觉识别系统[J].计算机研究与发展,200...

1、当您付费下载文档后,您只拥有了使用权限,并不意味着购买了版权,文档只能用于自身使用,不得用于其他商业用途(如 [转卖]进行直接盈利或[编辑后售卖]进行间接盈利)。
2、本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供参考,付费前请自行鉴别。
3、如文档内容存在侵犯商业秘密、侵犯著作权等,请点击“举报”。

常见问题具体如下:

1、问:已经付过费的文档可以多次下载吗?

      答:可以。登陆您已经付过费的账号,付过费的文档可以免费进行多次下载。

2、问:已经付过费的文档不知下载到什么地方去了?

     答:电脑端-浏览器下载列表里可以找到;手机端-文件管理或下载里可以找到。

            如以上两种方式都没有找到,请提供您的交易单号或截图及接收文档的邮箱等有效信息,发送到客服邮箱,客服经核实后,会将您已经付过费的文档即时发到您邮箱。

注:微信交易号是以“420000”开头的28位数字;

       支付宝交易号是以“2024XXXX”交易日期开头的28位数字。

客服邮箱:

biganzikefu@outlook.com

所有的文档都被视为“模板”,用于写作参考,下载前须认真查看,确认无误后再购买;

文档大部份都是可以预览的,笔杆子文库无法对文档的真实性、完整性、准确性以及专业性等问题提供审核和保证,请慎重购买;

文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为依据;

如果您还有什么不清楚的或需要我们协助,可以联系客服邮箱:

biganzikefu@outlook.com

常见问题具体如下:

1、问:已经付过费的文档可以多次下载吗?

      答:可以。登陆您已经付过费的账号,付过费的文档可以免费进行多次下载。

2、问:已经付过费的文档不知下载到什么地方去了?

     答:电脑端-浏览器下载列表里可以找到;手机端-文件管理或下载里可以找到。

            如以上两种方式都没有找到,请提供您的交易单号或截图及接收文档的邮箱等有效信息,发送到客服邮箱,客服经核实后,会将您已经付过费的文档即时发到您邮箱。

注:微信交易号是以“420000”开头的28位数字;

       支付宝交易号是以“2024XXXX”交易日期开头的28位数字。

文秘专家
机构认证
内容提供者

1

确认删除?