本申请公开了一种基于双相机多分支网络的虚拟现实教学手势识别方法,包括:获取待识别对象不同时刻手势变化的3D点云图像和深度图像;分别对3D点云图像、深度图像进行手部区域检测,从中分割出手部区域图像;将不同时刻的手部区域图像输入到训练好的手势识别模型中,生成待识别对象在不同时刻的手势识别结果;根据所述手势识别结果以及预设的标准手势与指令之间的映射关系,形成待识别对象在不同时刻的操作指令。本发明融合深度图像和3D点云图像两个模态的数据进行手部识别,两个模态的数据之间可以互补,具有更鲁棒的识别能力,能够提高识别精度;基于识别结果实现虚拟场景教学,可以使学生在...