【青春勇担当,实践绘江南⑮】人工智能与计算机学院“灵动手势・智康实践团”探索 AI 技术助力手部康复新方案

发布日期:2026-07-20  文:张轩基  图:于杭  来源:人工智能与计算机学院

为推进AI技术与康复医疗深度融合,践行科技自强的青年使命,7月中旬,江南大学人工智能与计算机学院“灵动手势・智康实践团”赴江南大学附属医院开展暑期社会实践。日前,团队已完成临床调研与系统实地测试核心环节,依托 MediaPipe 手部关键点检测技术,围绕手部康复训练系统的临床适配、效果验证与优化迭代落地实践,将专业所学转化为服务医疗民生的实际动能。

实践初期,团队与院内康复医师、治疗师及手部功能障碍患者开展多轮深度访谈,从临床专业与患者真实体验双维度梳理当前手部康复的难点。与医护人员的交流验证了行业普遍短板:传统手部功能评估依靠人工判断,缺乏统一量化标准;日常康复以被动活动为主,训练形式单一,患者长期坚持意愿弱;专业康复器械成本高昂,普通家庭与基层场景难以普及。一位患病五六年的患者提到,患侧手握力不足,精细动作难以完成,但对智能康复系统表达了尝试意愿。这些来自一线的痛点,凸显了轻量化、易坚持的智能康复方案的迫切需求。

基于前期开发的系统,实践团在康复科协助下组织志愿者及患者开展实地测试。系统以摄像头为载体,通过 MediaPipe 模型实时捕捉手部 21 个三维关键点坐标,参照 Fugl-Meyer 等临床评估体系输出量化评分,有效降低评估的主观偏差。同时,系统将标准康复动作转化为游戏化对战,如将对指训练设计为即时得分挑战,以正向反馈打破传统训练枯燥、依从性不足的难题。测试初步验证了技术方案的可行性与临床适配性,也让团队直观感受到量化评估对康复指导的价值。

在访谈与测试过程中,团队系统收集了医护人员与患者的反馈。医护人员提出强化视觉模仿训练以提升动作精度,补充旋转、翻转等日常高频精细动作模块,并融合镜像疗法、脑区激活反馈等前沿理念。患者则明确表示,相比闯关小游戏,更偏好跟随示范动作开展规范训练。这些宝贵建议为系统迭代明确了路径,团队将据此优化功能设计,增强临床适配度。

本次暑期实践是团队将 AI 技术从实验室推向应用场景的关键一步。团队直面医疗资源供给痛点,探索智能康复居家化、普惠化的可行路径。后续,团队将基于临床反馈完成系统迭代,整理调研数据形成专项报告,持续推进成果转化,力争让低成本的智能康复方案惠及更多手部功能障碍患者,以青年科创之力回应社会需求,在服务民生中检验专业成色。

实践团合影

与医师访谈

手势测试

阅读(

编辑:丁嘉铖

审核:王莉莉

技术支持:信息化建设管理处 校内备案号:JW备170083

地址:江苏省无锡市蠡湖大道1800号

邮编:214122

联系电话:0510-85326517

服务邮箱:xck@jiangnan.edu.cn