公开了用于自主和半自主驾驶应用的乘员注意力和认知负荷监测。在各种示例中，所估计的用户的视野或注视信息可以被投影到车辆外部并且与对应于车辆外部环境的车辆感知信息进行比较。结果，车辆的驾驶员或乘员的内部监控可用于确定驾驶员或乘员是否已经处理或看到了某些对象类型、环境条件或车辆外部的其他信息。为了更全面地了解用户的状态，可以监控用户的注意力和/或认知负荷以确定是否应该采取一个或更多个动作。因此，通知、AEB系统激活和/或其他动作可以基于更完整的用户状态来确定，如基于认知负荷、注意力和/或车辆的外部感知与估计的用户感知之间的比较而确定的。