本公开公开了一种基于自然语言和表情分析的场景分析方法、装置及系统，涉及人工智能机器学习技术领域。该系统包括：数据采集模块、云AI平台和数据库；其中所述数据库包括人脸数据库和语音数据库；所述数据采集模块，用于采集待测图像和待识别语音；所述云AI平台包括人脸识别模块、注意力感知表情分析模块、语音识别模块、语调分析模块、语义分析模块和综合分析模块,所述云AI平台用于根据所述待测图像、待识别语音、人脸数据库和语音数据库进行分析，以获取情绪分析结果。本公开实施例通过进行图像分析和语音分析得到表情类别、语义、语调的识别结果，根据多维度的数据进行情绪分析，提高了情绪识别的速度和精确度。