本公开的实施例提供了一种应用于客服终端的交互方法和系统，其中，所述方法包括：响应于在预设时间段内重复检测到目标用户的人脸位于交互区域时，提取所述目标用户的人体轮廓特征；对所述目标用户进行锁定跟踪，根据所述人体轮廓特征，确定感兴趣区域，其中，所述感兴趣区域包括手部区域；按照第一预设时间间隔提取所述手部区域内的目标用户的手势图像帧，对所述手势图像帧进行识别，生成识别结果；根据所述识别结果，发送反馈信息。以此方式，能够有效为特殊乘客提供咨询服务，提高运营效率，进而提高用户体验。