本发明涉及教学辅助培训技术领域,公开了一种基于视觉动捕的掘进机操控教学辅助培训系统,包括摄像单元、显示单元及处理单元;摄像单元用于实时拍摄用户手部与眼部姿态;处理单元包括手势识别处理单元和仿真掘进机操作系统;手势识别处理单元通过检测用户手部与眼部的关键节点空间数据来判断用户手势命令与注意力集中程度;仿真掘进机操作系统用于接收命令实现操控,并将操作、环境反馈画面传输至显示单元。本发明采用多种算法精确识别手部姿态,系统鲁棒性高;结合仿真算法最大程度模拟真实工况,实用性强;采用单目视觉方法捕捉手部姿态实现人机交互,对硬件设备要求低,可部署多个平台,易于推广使用。
📄 2024100157891
📂 G06F3_01
👤 安徽建筑大学
📅 2024-01-05