本发明属于人脸识别技术领域，公开了一种复杂场景下的多尺度特征人脸属性识别系统及其方法，包括特征提取模块、特征融合模块和多任务输出网络模块，特征提取模块用于将输入的图像信息进行批归一化，将得到的特征图分别进行卷积和空洞卷积；特征融合模块用于利用普通卷积和空洞卷积实现特征计算和融合；多任务输出网络模块用于通过全连接层进行分类，在网络分支之前依次设置全连接，负责共享特征提取。本发明不仅能够保证网络具有强大的特征提取能力，也能够将不同尺度的信息进行有效融合，使用专用的特征共享通道保证了特征的有效流动，使网络性能得到提升，无论是局部属性特征还是全局属性特征性能都有了巨大的提升。