本发明涉及一种对编码单位的变换单位编码和解码的方法。具体地，公开了一种用于从视频位流解码包含与一个色度通道相关联的至少一个色度残差系数阵列的变换单位的方法。该方法确定变换单位的与该变换单位在相应编码单位中的层级有关的大小，并且根据所确定出的大小来识别最大数量的逆变换。该方法使用所识别出的最大数量的变换来从视频位流解码至少一个色度残差系数阵列，针对解码后的色度残差系数阵列选择逆变换，其中该逆变换是从逆变换的预定集合中所选择的，并且将所选择的逆变换应用于各个色度残差系数阵列以针对变换单位的色度通道对色度残差样本进行解码。还公开了相似的编码方法。