一种车牌辨识系统，包括影像撷取模块，车牌侦测模块，字符段提取模块，字符分类模块及字符辨识模块。影像撷取模块用以撷取影像。车牌侦测模块用以接收该影像并侦测该影像中的车牌。字符段提取模块用以提取该车牌上的复数个字符段。字符分类模块用以计算所述这些字符段中字符段的每一可能字符的概率。字符辨识模块用以根据所述这些字符段的预定语法及该字符段之复数个可能字符(character)的概率以识别出该字符段的选定字符。