本发明公开了一种建筑空调系统需求响应的强化学习建模方法，包括以下步骤：利用建筑已知室内温度、制冷量、气象、人员数据，开发RC灰箱模型，建立室内温度与空调系统制冷量之间的联系；对空调系统与蓄电池控制建立基于值函数线性逼近的强化模型；利用气象、人员数据对强化学习模型智能体进行训练；将训练完备的智能体应用于目标时间段，得出空调系统与蓄电池的控制策略。本发明可反映建筑热特性，降低对参考数据与先验知识。可以在保证室内人员热舒适的前提下，提出低能耗、低用电费用的空调系统和蓄电池运行策略。