文章详情

题名 · 作者 · 摘要 · 关键词 · DOI · 参考文献

基于多传感器融合的双向翻译系统

陆聚谷,吕坤,刘智文,王佳乐

(宿迁学院 信息工程学院,江苏 宿迁 223800)

栏目:计算机技术 · 第 2026 年第 19 期 · 页码:116-119 · 2096-4706(2026)19-0116-04 · 中图分类号:TP391 · 文献标识码:A · DOI:10.19850/j.cnki.2096-4706.2026.19.022

摘要

为解决听障人士的沟通障碍与安全需求,设计并实现了一种面向该群体的嵌入式双向翻译系统。核心贡献在于构建了低成本、低功耗、高集成度的可穿戴系统级解决方案。系统以STM32F103C8T6为核心,融合Flex传感器与优化的阈值识别算法,实现“手语转语音”;通过ASRPRO语音模块和串口屏实现“语音转手语”。集成GPS/GSM模块,支持一键发送含实时位置的紧急求助信息,并通过LED与震动提供多通道状态反馈。测试结果表明,系统手势识别准确率高于92%,双向翻译响应及时,通信功能可靠。相较于视觉方案,在成本、功耗及用户隐私保护方面优势显著,为听障人士提供了高效、安全的无障碍沟通工具。

关键词

多传感器;语音识别;手势识别;双向翻译;STM32

参考文献

  1. [1] 程杰,陈建华,许舒涵. 适用于手语采集与输入的智能手套及翻译系统[J]. 电子产品世界,2023,30(8):61-65.
  2. [2] 许旺麒. 基于蓝牙定位与深度学习的低成本室内导航系统研究[D]. 杭州:浙江工商大学,2025.
  3. [3] 胡嘉伟,冯正慧,陈国俊,等. 融合多传感器数据的社区环境智慧监测系统设计[J].无线互联科技,2023,20(12):16-18.
  4. [4] 姜维佳,韩亚丽,史金飞,等. 基于数据手套的手语翻译系统研究[J]. 电子器件,2024,47(4):1128-1132.
  5. [5] 傅佳军. 手语实时翻译的聋哑人无障碍双向交互系统设计[D]. 天津:天津理工大学,2022.
  6. [6] 李冰妍,孙煊玉,单东洋,等. 基于STM32的手语翻译手套研制[J]. 物联网技术,2025,15(5):127-132.
  7. [7] 夏明明,柴新宇,杨金广,等. 一种基于多传感器的手势识别装置设计[J]. 集成电路应用,2021,38(12):292-293.
  8. [8] 刘宇,李仁想,杨梦凡,等. 语音控制垃圾桶的设计与实现[J]. 无线互联科技,2024,21(17):24-26,30.
  9. [9] 张雨曦,赵婉莉. 基于机器学习的智能仿生双向手语自动翻译系统[J]. 自动化与仪器仪表,2022(1):176-180.
  10. [10] 崔宗兴,齐中正,盛浩男. 智能手语翻译手套的创新设计与应用[J]. 物联网技术,2025,15(6):2-3.

基金项目

2023年江苏省科技计划项目重点研发计划(BE2023345);2023年宿迁市科技计划指导性项目(Z2023135);2025年宿迁学院大学生创新创业训练计划项目(X2025141600431);2024年宿迁学院“实践教学”专项教学改革研究课题(2024SJJX04);2024年宿迁学院创新创业教育研究课题(2024cxcy03)

作者简介

陆聚谷(2004—),男,汉族,江苏苏州人,本科在读,研究方向:软件工程;通信作者:吕坤(1989—),男,汉族,江苏宿迁人,实验师,硕士,研究方向:计算机软件与理论;刘智文(2005—),男,汉族,江苏连云港人,本科在读,研究方向:软件工程;王佳乐(2006—),男,汉族,江苏徐州人,本科在读,研究方向:软件工程。