本申请涉及一种多模态数据处理方法和多模态数据处理系统，其中，该多模态数据处理方法包括：获取该动态监测数据，将该动态监测数据输入至第一目标模型，得到第一目标结果；其中，该第一目标模型是指利用循环神经网络训练得到的模型；获取该静态监测数据，将该静态监测数据和该第一目标结果输入至第二目标模型，得到第二目标结果；其中，该第二目标模型是指利用注意力机制训练得到的模型；根据该第二目标结果生成数据预测结果。通过本申请，解决了多模态数据处理的计算开销大、表征数据关联性弱的问题，实现了对多模态数据的同时表征，并且在减少计算开销的情况下找到多模态数据间的关联关系。