[其他] 请问这两年视频补帧技术有什么突破吗？

posted by wap, platform: MAC OS X
作为一个也在折腾AI的，说说我的看法：

视频插帧和游戏实时渲染完全是两个不同的技术路径。游戏是预渲染，每一帧都可以精确计算；但电影是24帧拍摄，中间的信息本身就是缺失的，AI只能靠猜，猜错了就会产生鬼影和模糊。

这几年进步其实挺大的：
1. RIFE (Real-Time Intermediate Flow Estimation) 现在的效果已经比早期的光流法好很多，特别是RIFE 4.x版本
2. 小黄鸭(DAIN) 虽然老牌但依然经典，特别是在处理复杂运动场景时
3. 最新的AI模型比如GMFSS、UMSS这些在运动估计上更激进

但问题是：电影补帧本质上是"无中生有"，而游戏是"有据可查"。这就是为什么再强的AI插帧也比不过原生的60帧/120帧。

另外还有个现实问题：大多数电影的帧率本身就是24fps，这是为了艺术效果刻意为之。很多导演认为提高帧率会破坏电影感。所以与其纠结插帧，不如换个角度想想：也许24帧本身就是最好的选择？

对了，如果你是用Emby/Jellyfin这些，看的时候直接调用小黄鸭插帧，速度和效果都能兼顾，比本地转码省事多了。