本公开提供了一种语义识别方法、装置、电子设备及存储介质，涉及计算机技术领域，具体涉及深度学习、自然语言处理等人工智能技术领域，包括：获取第一模态数据和第二模态数据，确定第一模态数据的第一语义表示，并确定第二模态数据的第二语义表示，再确定第一语义表示和第二语义表示之间的关联语义表示，以及根据第一语义表示、第二语义表示，以及关联语义表示识别第一模态数据和第二模态数据之间的目标共享语义，实现基于关联语义表示，对第一语义表示和第二语义表示进行细粒度的关联融合，从而能够识别得到更加准确，丰富的跨模态语义表示，有效地提升语义表示的通用性和泛化性，有效地提升语义识别效果。