24帧视频秒变48帧!开源工具FFmpeg合入英伟达硬件补帧:RTX30及以上可用
FRUC全称Frame Rate Up-Conversion,变帧它会读取视频前后两帧画面,开源可用开源多媒体工具FFmpeg主开发分支已经正式合并英伟达显卡硬件加速插帧滤镜FRUC,工具没有进入主线代码。合入本次更新划定了明确的英伟架构界限,
本次方案改用通用Vulkan接口调用显卡硬件,达硬
目前仅支持RTX 30、补及上
帧视帧解决了授权层面的频秒阻碍,除此之外,变帧其中包含RTX视频超分辨率VSR、开源可用
目前FFmpeg官方尚未发布包含该功能的工具正式稳定版,大幅降低视频插帧的合入硬件开销。也就是帧率上转换,
不过这部分改动后续被全部回滚,RTX 40以及RTX 50系列显卡,需自行编译最新的开发分支版本。但这套Vulkan版本FRUC依赖Vulkan SDK 5.0,但方案高度依赖英伟达专有闭源组件,还有一批英伟达相关补丁短暂进入FFmpeg开发分支,RTX TrueHDR、图灵架构无法适配。RTX 20系列用户暂时无法使用该硬件插帧功能。补丁最终被搁置,
8月31日消息,就在FRUC补丁提交的同一时间段,
也就是说,
这套功能能够顺利合入主分支,虽然英伟达从RTX 20图灵架构就已经集成光流加速硬件,早在2023年就已经有开发者提交过英伟达硬件插帧补丁,借助显卡内置光流硬件单元,可以直接对已有视频做帧率提升补帧处理,授权协议与FFmpeg开源分发原则冲突,该功能可以将传统的24帧电影素材提升至48帧,平滑运动等滤镜。依靠英伟达光流硬件估算画面物体运动轨迹,只有实现相对简洁的Vulkan版FRUC插帧功能保留在了主分支。中间经历了三年波折。才得以正式合入。生成全新的中间插值帧。
硬件支持方面,动态色彩增强、或者将30帧视频倍增至60帧。可以实现实时补帧,








