检索结果-南通市图书馆

作者：瞿川雲中南财经政法大学

学位级别：硕士

人工智能在如今的社会已经渗透到各个角落,但涉及的领域大都是热门行业或使用对象为身体健全的普通人,很少有人关注到身体条件弱势只能用手语进行交流的聋哑人群体。本文的研究致力于为聋哑人研发一套实时手语翻译系统,为社会上的这群... 详细信息

人工智能在如今的社会已经渗透到各个角落,但涉及的领域大都是热门行业或使用对象为身体健全的普通人,很少有人关注到身体条件弱势只能用手语进行交流的聋哑人群体。本文的研究致力于为聋哑人研发一套实时手语翻译系统,为社会上的这群少数群体打破交流障碍,使他们也能享受到科技的便利与社会的人文关怀。首先,本文对手语翻译系统的研究现状进行综述,发现目前较为成熟的手语翻译系统分为两类:一类是借助特殊外接设备进行数据采集,受制于特殊外接设备这类手语翻译系统方案未能推广普及;另一类是借助普通RGB相机完成数据采集,这类方案对算法性能有一定要求,直到Transformer、YOLO-V5等优秀算法出现,使用RGB图像进行手语翻译的方案才再次发展起来。本文采用第二类方案完成手语翻译系统的研发,此方案具备方便快捷、可操作性、推广性强等优点。对比多种深度学习神经网络,本文在前人研究的基础上设计了轻量STMC-Transformer模型。其中STMC特征提取网具有特征提取准确、学习率快、语义对齐良好等优点,而Transformer网络则在机器翻译领域表现不俗,但由于原生STMC-Transformer模型体积较大,本文针对模型进行以下轻量优化研究:（1）STMC网络:引入深度可分离卷积神经网络,替代SMC模块中的2D-CNN卷积,使得该部分的参数量和计算量均降低为原网络的_1,达到提升模型手语翻译速度的目的。（2）Transformer网络:使用稀疏注意力机制替换自注意力机制,建立稀疏解码器,从而在处理特征数据时忽略部分远程相关性不大的特征,达到缩短Transformer网络处理数据时间的目的。（3）Transformer网络层数调优:对比不同层数编码-解码层的手语翻译实验结果,选取效果最优的结构,完成对模型的剪枝与轻量化,使其达到手语翻译实时性的要求。（4）通过实验证明ROI感兴趣区域提取有利于轻量STMC-Transformer网络对图片数据的特征提取,提高手语翻译系统的稳定性和环境适应性。对比原生STMC-Transformer模型的平均11秒翻译速度,本文的轻量模型平均手语翻译时间仅为6秒,翻译时间缩短5秒;对比STMC的平均连续手语识别8秒时间,本文轻量模型也提升了2秒。轻量STMC-Transformer模型构建完成后,本文进行系统的设计与实现,在手语翻译系统中加入自动录制等人性化功能,使系统使用更为贴合生活实际。本文实现的实时手语翻译系统拥有操作简便、推广性强、实时翻译的优点。在系统实现部分,本文完成以下工作:（1）选用三帧差分法进行运动检测,实现录制自动停止以及提取关键帧功能。（2）对比YOLOv5-lite与Faster R-CNN网络,采用更为轻量的YOLOv5-lite网络实现头部手部实时目标检测功能。

关键词：深度学习手语翻译系统图像识别特征提取机器翻译

来源：

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于Web和深度学习的手语翻译系统的设计与实现

引用

移动信息 2024年第8期46卷 358-360,363页

作者：邓增辉程胜月王建彬方俊智郑州科技学院郑州450064

随着互联网和人工智能技术的快速发展,手语翻译系统的需求日益增多。相较于传统的人工手语翻译方法,通过人工智能技术结合Web方法来实现在线手语翻译,可以有效提升手语翻译的效率。该系统首先使用YOLOv5方法设计适合的手语翻译模型,并... 详细信息

随着互联网和人工智能技术的快速发展,手语翻译系统的需求日益增多。相较于传统的人工手语翻译方法,通过人工智能技术结合Web方法来实现在线手语翻译,可以有效提升手语翻译的效率。该系统首先使用YOLOv5方法设计适合的手语翻译模型,并在相关数据集上进行验证,得到了良好的效果。然后使用B/S架构搭建网站系统、Spring Boot框架和React组件,实现快速开发,并根据现实场景设置功能模块。最后,将手语翻译模型嵌入Web网站,为听障人士和手语学习者提供一个学习、交流的平台,为听障人士提供便利。

关键词：手语翻译系统 YOLOv5 B/S架构 Spring Boot

来源：

维普期刊数据库评论

在线全文

维普期刊数据库

学校读者我要写书评

暂无评论

一种用于手语识别的中国手语分类方法

引用

北京科技大学学报 2001年第3期23卷 284-286页

作者：张亚新原魁杜清秀邹伟中国科技大学研究生院北京100038 中国科学院自动化研究所北京100080

从手语识别的角度出发对中国手语的特征进行了分析，对现有的手语识别方法── 基于计算机视觉的方法和基于佩带式输入设备的方法进行了分析和比较，并提出了一种新的手语分类方法．

关键词：中国手语手语识别计算机视觉佩带式输入装置手语分类方法手语翻译系统

来源：

维普期刊数据库

同方期刊数据库评论

在线全文

学校读者我要写书评

暂无评论

欢迎您,

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

在线全文

在线全文

在线全文

请选择保存的检索档案：

请选择收藏分类：

通借通还

欢迎您,

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

在线全文

在线全文

在线全文

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：