本发明提供一种量化变换系数管理装置，包括：第一管理模块，所述第一管理模块包括：第一存储单元和第一处理单元。通过所述第一存储单元和所述第一处理单元，所述第一管理模块能够快速存取和管理所述第一管理单元输出的部分量化变换系数和第一编码单元的量化变换系数，仅使用一个存储单元实现了不同尺寸的编码单元的量化变换系数的数据共享，避免了不同尺寸的编码单元都需要独立的存储单元的情况，从而避免了多个存储单元中的量化变换系数被不停地被选择、搬移或丢弃的情况，降低了所述第一存储单元的压缩容量，从而减少了硬件开销，同时也降低了所述第一存储单元的运行功耗，提高了所述量化变换系数管理装置的工作效率。