编码-解码框架不同于:
1、先解码再编码。
2、每次对groundtruth和预测的帧之间的差进行编码,进行下一次预测。
3、多帧预测时对相邻两帧预测的差(t, t+1)进行编码,预测下一帧(t+2)
改进:
每次预测下一帧,需要输入前一帧预测和真值的差,当进行多帧预测时无法输入真值,只能讲模型预测的前一帧作为真值。
如何将改模型改进用于多帧预测?
1、先解码再编码。
2、每次对groundtruth和预测的帧之间的差进行编码,进行下一次预测。
3、多帧预测时对相邻两帧预测的差(t, t+1)进行编码,预测下一帧(t+2)
每次预测下一帧,需要输入前一帧预测和真值的差,当进行多帧预测时无法输入真值,只能讲模型预测的前一帧作为真值。
如何将改模型改进用于多帧预测?