本发明提出了一种基于图卷积和胶囊神经网络的行为识别方法。本发明通过人工标记得到每帧人体连续动作图像中人体关节点的空间坐标，进一步构建人体关节点的空间坐标向量；通过多层感知机将空间坐标向量映射为高维度特征向量，并结合动作关联原则构建关节点邻接矩阵；根据空间坐标构建出关节点的速度空间向量，进一步构建出关节点的加速度空间向量；将卷积神经网络用于提取特征，将胶囊神经网络用于动作分类，通过卷积神经网络、胶囊神经网络的串联构建胶囊卷积神经网络；将训练集重复多代训练得到训练好的胶囊卷积神经网络。本发明符合实际运动的特点，特征在图上的传播更加符合实际情况，并能有效的保留特征用于分类，提高模型的识别能力。