本发明提供了一种分阶段注意时序对齐的少样本动作识别方法，通过分阶段的注意力机制更精确地实现视频片段的时序对齐，使位于不同阶段的多注意力模块能够集中注意到视频不同阶段的特定特征，避免了视频阶段级别的时序错配，克服现有单一注意力模块时序对齐的范围过于宽泛的问题，保证了对齐后的视频片段对间具有阶段时序先于偏序关系，从而更合理、准确地获取利用视频中动作的时序信息；通过剔除相似度过低的视频片段特征对，以降低非动作片段的干扰，学习更有效的动作时序片段特征，从而提高了少样本动作识别的准确率。