本申请公开了一种基于多重注意力的视觉问答方法及系统，在本申请提供的方法中，先获取待处理视觉问答中的图片信息及对应的问题信息，提取图片信息中的图片特征数据，然后将图片特征数据和问题信息同时输入基于注意力机制的第一长短时记忆网络，通过分配注意力权重获取图片内容信息，再通过两个双向长短时记忆网络完成问题和图片的结合，输出待处理视觉问答的答案。基于本申请提供的基于多重注意力的视觉问答方法及系统，在R‑CNN网络的计算过程中增加一些记忆模块以提高模型在训练过程中的知识源，产生更多样化且合理的答案，端到端的记忆网络实现提取问题信息的同时融合与问题相关的先验知识，提高问题回答上的整体准确率。