本发明提供了一种可见近红外光谱字典的构建方法及系统，属于色度学理论、光电传感器、计算信息学、目标背景特性和目标识别的交叉领域。方法为：以归一化处理后的可见光相机四原色的光谱响应曲线作为光谱基函数，构建四原色色品锥体；对光谱基函数进行加权组合，构成初始可见近红外光谱字典；基于初始可见红红外光谱字典，以不同的光谱分辨率在所述四原色色品锥体上取点进行离散化处理，形成初始可见近红外光谱字典中的字；将字对应的色度坐标聚类成不同群组，并对不同群组种类对应的多尺度光谱响应曲线进行加权组合，生成字典中的短语或句子，生成最终的可见近红外光谱字典。本发明提供的可见近红外光谱字典可支撑新型计算成谱成像光谱仪。