HuanYu Assistive Sign Platform
把手语识别、翻译和训练关卡放进同一个工作台
面向课堂演示和辅助沟通场景,唤语现在提供视频上传识别、E2E 闯关评测、TTS 播报、对话推荐和学习记录入口。
识别链路Video -> Gloss
中文输出G2T / E2E
辅助能力TTS 播报
训练任务闯关评分
手语翻译
上传视频或运行精选样本,展示 gloss、中文结果、模型状态和质量降级原因。
Flask APIE2E 闯关
每个关卡用目标 gloss 和中文评分,优先调用 `best_e2e_by_wer.pt`。
WER 69.42%学习课程
围绕问候、求助、购物、医疗和出行等高频场景组织课程入口。
课程化双手粒子游戏
无需登录即可体验摄像头手势识别,用双手控制科幻粒子星云、传送门和能量场。
Guest Play当前主线演示闭环
- 视频翻译网页端和树莓派端共用 `/api/recognition/upload`。
- E2E 闯关新增 `/api/e2e/challenge/*`,支持录制、上传和评分。
- 辅助沟通翻译结果可以进入情绪分析、回复推荐和语音播报。
