描述用于可缩放视频编码和解码的技术和工具。例如，视频编码器和解码器分别在基于提升的运动补偿时间滤波和逆运动补偿的时间滤波中，执行自适应更新操作。在预测阶段，编码器计算用于奇数图像的运动补偿预测和将高通图像计算为奇数图像和预测间的差值。对更新阶段，编码器在高通图像上执行运动补偿(以及可能另一高通图像)以便计算运动补偿更新。基于感知准则，编码器将更新和偶数图像自适应组合以形成低通图像。对更新阶段，解码器在一个或多个高通图像上执行运动补偿以便计算运动补偿更新。基于感知准则，编码器将更新和低通图像组合以重构偶数帧。