这套功能能够顺利合入主分支,帧视帧中间经历了三年波折。频秒开源多媒体工具FFmpeg主开发分支已经正式合并英伟达显卡硬件加速插帧滤镜FRUC,变帧早在2023年就已经有开发者提交过英伟达硬件插帧补丁,开源可用依靠英伟达光流硬件估算画面物体运动轨迹,工具大幅降低视频插帧的合入硬件开销。
英伟RTX TrueHDR、达硬平滑运动等滤镜。补及上它会读取视频前后两帧画面,帧视帧也就是频秒帧率上转换,普通用户若想抢先体验,变帧除此之外,开源可用只有实现相对简洁的工具Vulkan版FRUC插帧功能保留在了主分支。
目前FFmpeg官方尚未发布包含该功能的合入正式稳定版,但方案高度依赖英伟达专有闭源组件,就在FRUC补丁提交的同一时间段,没有进入主线代码。本次更新划定了明确的架构界限,还有一批英伟达相关补丁短暂进入FFmpeg开发分支,才得以正式合入。
硬件支持方面,RTX 20系列用户暂时无法使用该硬件插帧功能。动态色彩增强、借助显卡内置光流硬件单元,
本次方案改用通用Vulkan接口调用显卡硬件,
不过这部分改动后续被全部回滚,但这套Vulkan版本FRUC依赖Vulkan SDK 5.0,可以实现实时补帧,其中包含RTX视频超分辨率VSR、生成全新的中间插值帧。补丁最终被搁置,虽然英伟达从RTX 20图灵架构就已经集成光流加速硬件,图灵架构无法适配。可以直接对已有视频做帧率提升补帧处理,需自行编译最新的开发分支版本。该功能可以将传统的24帧电影素材提升至48帧,不再绑定私有SDK,
目前仅支持RTX 30、
也就是说,授权协议与FFmpeg开源分发原则冲突,RTX 40以及RTX 50系列显卡, 8月31日消息,或者将30帧视频倍增至60帧。
FRUC全称Frame Rate Up-Conversion,解决了授权层面的阻碍,