V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
爱意满满的作品展示区。
hzwer
V2EX  ›  分享创造

光流插帧方法 RIFE, GPU720p 30+FPS

  •  1
     
  •   hzwer ·
    hzwer · 2020-11-13 19:04:29 +08:00 · 2841 次点击
    这是一个创建于 1470 天前的主题,其中的信息可能已经有所发展或是发生改变。

    开源了一个光流插帧算法 RIFE,Github 项目arXiv 论文

    比现有的光流插帧方法加速 5x ~ 20x 目前在优化效果和写视频处理脚本,欢迎关注

    720p 2x 插帧 30+FPS (TITAN X (Pascal)

    也可用于生成慢动作 gif

    支持 CPU,我的 mac 上生成 256x448 大小的 16x gif 需要 15 秒

    目前提供脚本可以从两张输入图,插出 2^K 个中间帧,如下: demo

    第 1 条附言  ·  2020-11-14 14:25:10 +08:00
    现在可以在线用 colab 插帧了,欢迎体验
    futou
        1
    futou  
       2020-11-13 21:54:11 +08:00
    网络不复杂,结果还挺好的,示例图片只有胳膊区域有可见失真,旷视就是旷视👍。
    不了解这个方向,感觉唯一的遗憾是只能单次插出中间帧,倍数可控性高的同时复杂度也高。
    CrabAss
        2
    CrabAss  
       2020-11-14 01:59:34 +08:00
    挺厉害的
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2304 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 16:04 · PVG 00:04 · LAX 08:04 · JFK 11:04
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.