V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
爱意满满的作品展示区。
hzwer

光流插帧方法 RIFE, GPU720p 30+FPS

  •  1
     
  •   hzwer ·
    hzwer · Nov 13, 2020 · 3498 views
    This topic created in 2003 days ago, the information mentioned may be changed or developed.

    开源了一个光流插帧算法 RIFE,Github 项目arXiv 论文

    比现有的光流插帧方法加速 5x ~ 20x 目前在优化效果和写视频处理脚本,欢迎关注

    720p 2x 插帧 30+FPS (TITAN X (Pascal)

    也可用于生成慢动作 gif

    支持 CPU,我的 mac 上生成 256x448 大小的 16x gif 需要 15 秒

    目前提供脚本可以从两张输入图,插出 2^K 个中间帧,如下: demo

    Supplement 1  ·  Nov 14, 2020
    现在可以在线用 colab 插帧了,欢迎体验
    futou
        1
    futou  
       Nov 13, 2020
    网络不复杂,结果还挺好的,示例图片只有胳膊区域有可见失真,旷视就是旷视👍。
    不了解这个方向,感觉唯一的遗憾是只能单次插出中间帧,倍数可控性高的同时复杂度也高。
    CrabAss
        2
    CrabAss  
       Nov 14, 2020
    挺厉害的
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   3033 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 30ms · UTC 04:50 · PVG 12:50 · LAX 21:50 · JFK 00:50
    ♥ Do have faith in what you're doing.