本发明提供一种消化道内镜自动识别手术类型方法、系统和应用，包括：数据获取，医生在手术时需借助消化道内镜，本发明通过消化道内镜视频流获取检测帧；检测位置判断，将所述检测帧输入手术类型分类模型以判断所述检测帧对应的检测位置；手术类型判断，综合多个检测位置的判断结果，判断当前的手术类型并输出结果。本发明能够为医生的手术提供辅助，医生无需在辅助诊断设备上进行手动切换，提高了手术的效率，也提高了医生对辅助在诊断设备的使用体验。