基于多传感器融合的双向翻译系统
(宿迁学院 信息工程学院,江苏 宿迁 223800)
摘要
为解决听障人士的沟通障碍与安全需求,设计并实现了一种面向该群体的嵌入式双向翻译系统。核心贡献在于构建了低成本、低功耗、高集成度的可穿戴系统级解决方案。系统以STM32F103C8T6为核心,融合Flex传感器与优化的阈值识别算法,实现“手语转语音”;通过ASRPRO语音模块和串口屏实现“语音转手语”。集成GPS/GSM模块,支持一键发送含实时位置的紧急求助信息,并通过LED与震动提供多通道状态反馈。测试结果表明,系统手势识别准确率高于92%,双向翻译响应及时,通信功能可靠。相较于视觉方案,在成本、功耗及用户隐私保护方面优势显著,为听障人士提供了高效、安全的无障碍沟通工具。
关键词
多传感器;语音识别;手势识别;双向翻译;STM32
参考文献
- [1] 程杰,陈建华,许舒涵. 适用于手语采集与输入的智能手套及翻译系统[J]. 电子产品世界,2023,30(8):61-65.
- [2] 许旺麒. 基于蓝牙定位与深度学习的低成本室内导航系统研究[D]. 杭州:浙江工商大学,2025.
- [3] 胡嘉伟,冯正慧,陈国俊,等. 融合多传感器数据的社区环境智慧监测系统设计[J].无线互联科技,2023,20(12):16-18.
- [4] 姜维佳,韩亚丽,史金飞,等. 基于数据手套的手语翻译系统研究[J]. 电子器件,2024,47(4):1128-1132.
- [5] 傅佳军. 手语实时翻译的聋哑人无障碍双向交互系统设计[D]. 天津:天津理工大学,2022.
- [6] 李冰妍,孙煊玉,单东洋,等. 基于STM32的手语翻译手套研制[J]. 物联网技术,2025,15(5):127-132.
- [7] 夏明明,柴新宇,杨金广,等. 一种基于多传感器的手势识别装置设计[J]. 集成电路应用,2021,38(12):292-293.
- [8] 刘宇,李仁想,杨梦凡,等. 语音控制垃圾桶的设计与实现[J]. 无线互联科技,2024,21(17):24-26,30.
- [9] 张雨曦,赵婉莉. 基于机器学习的智能仿生双向手语自动翻译系统[J]. 自动化与仪器仪表,2022(1):176-180.
- [10] 崔宗兴,齐中正,盛浩男. 智能手语翻译手套的创新设计与应用[J]. 物联网技术,2025,15(6):2-3.
基金项目
2023年江苏省科技计划项目重点研发计划(BE2023345);2023年宿迁市科技计划指导性项目(Z2023135);2025年宿迁学院大学生创新创业训练计划项目(X2025141600431);2024年宿迁学院“实践教学”专项教学改革研究课题(2024SJJX04);2024年宿迁学院创新创业教育研究课题(2024cxcy03)
作者简介
陆聚谷(2004—),男,汉族,江苏苏州人,本科在读,研究方向:软件工程;通信作者:吕坤(1989—),男,汉族,江苏宿迁人,实验师,硕士,研究方向:计算机软件与理论;刘智文(2005—),男,汉族,江苏连云港人,本科在读,研究方向:软件工程;王佳乐(2006—),男,汉族,江苏徐州人,本科在读,研究方向:软件工程。