一种在显示器中可针对不同色彩而调整视频信号亮度的调整装置及其方法，此装置具有一色彩旗标产生模块，用以将多色彩信号转换成多色彩旗标；一亮度调整值计算模块，接收多个不同色彩的亮度调整输入值及多色彩旗标，用以计算出一亮度调整输出值；及一亮度输出模块，用以将此亮度调整输出值作用于一亮度输入信号，以产生一亮度输出信号。本发明的装置及方法可让使用者针对不同色彩，分别调整其亮度。