本发明公开的一种多模态事理图谱的构建方法、系统和可读存储介质，其中方法包括：基于预设模型对训练数据提取单模态数据特征，进而得到对应多模态数据的依赖关系，基于所述依赖关系对所述训练数据进行多模态数据抽取；将抽取到的数据同一向量化表示，并基于量化后的语义信息进行计算得到计算结果；基于所述计算结果调用事理图谱进行概念层以及数据层的数据链接，以完成所述多模态事理图谱的构建。本发明能够实现跨模态的知识表示，通过多维度描述进行查证补全使知识可信度更高；同时能够实现多模态知识融合消歧，方便计算、推理，为知识推理提供多层次基础支撑，为事理图谱应用落地提供保障；另外可以使得知识类型更加丰富、立体。