本申请涉及一种用户语音数据处理方法、装置、电子设备及计算机可读介质。该方法包括：获取来自用户的语音数据；将所述语音数据输入声学模型中，生成多个音素数据；将所述音素数据输入发音模型中，生成多维字符查询矩阵，所述多维字符查询矩阵中包括多个维度，每个维度均包括多个字符和其对应的概率值；将所述多维字符查询矩阵输入语言模型中，生成语义文本；基于所述语义文本生成响应数据以反馈给所述用户。本申请涉及的用户语音数据处理方法、装置、电子设备及计算机可读介质，能够快速准确的对用户的语音数据进行识别，从而更加顺畅的和用户进行交互，快速响应用户的指令，提升用户整体满意度、提升业务处理效率。