是否有多图像到 1 图像深度学习方法? (pix2pix?)

xiaoxingxing pytorch 176

原文标题Is there a multi images to 1 image deep learning method? (pix2pix?)

我正在尝试建立一个视频稳定深度学习模型。
我想让模型根据最后 10 帧预测帧应该如何稳定

我试过pix2pix,它是图像到图像,但我没有得到好的结果
所以,我想要与 pix2pix 相同的图像,但多图像到 1 个图像有没有一种方法,或者我可以使用 pix2pix 来实现吗?

原文链接:https://stackoverflow.com//questions/71995440/is-there-a-multi-images-to-1-image-deep-learning-method-pix2pix

回复

我来回复
  • Maxime Bonnesoeur的头像
    Maxime Bonnesoeur 评论

    因此,我不知道您是否真的需要使用深度学习来构建这种视频稳定功能,或者您是否只想使用现成的解决方案。

    对于现成的解决方案,您可以查看内置了出色稳定系统的 vidgear:https://abhitronix.github.io/vidgear/latest/gears/stabilizer/overview/

    如果你想要更高级的解决方案和架构,你可以看看他的论文线程代码:https://paperswithcode.com/task/video-stabilization

    鉴于 pix2pix 的当前架构,我看不出多图像将如何提供一些稳定性,因为正如您所说,pix2pix 不考虑其先前的输出或图像流来生成其预测。

    我希望它有所帮助^^

    2年前 0条评论