Hybrid Learning of Optical Flow
2017-09-29 本文已影响0人
kikyou123
问题:CNN-based光流预测在合成的数据上表现很好,但是在真是的场景中表现不好
方法:训练中加入真实数据,进行自监督的视频预测任务。
改进方向:1、动作编码采用VAE
2、将光流预测与视频预测进行进一步结合,光流应该可以合成下一帧,下一帧也应该估计出光流。
3、利于视频预测?
问题:CNN-based光流预测在合成的数据上表现很好,但是在真是的场景中表现不好
方法:训练中加入真实数据,进行自监督的视频预测任务。
改进方向:1、动作编码采用VAE
2、将光流预测与视频预测进行进一步结合,光流应该可以合成下一帧,下一帧也应该估计出光流。
3、利于视频预测?