» 您尚未登录:请 登录 | 注册 | 标签 | 帮助 | 小黑屋 |


发新话题
打印

DLSS 4多帧生成下放RTX 40/30:完全有可能

posted by wap, platform: Chrome
RTX 50系列带来了新的MFG多帧生成技术,可以为每一个帧画面额外生成三帧,性能最高可达原始的8倍之多,但它仅限新的RTX 50系列显卡。

NVIDIA应用深度学习研究副总裁、堪称“DLSS之父”的Bryan Catanzaro在接受采访时解释了DLSS 4的工作原理,以及为何仅支持RTX 50系列。

他表示,NVIDIA在研究DLSS 3帧生成的时候,还没有足够的Tensor核心,也没有足够好的光流算法,当时的计算资源无法满足实时光流算法的需要。

因此就有了光流加速器,是视频编码技术的一个演进技术,也是汽车计算视觉加速方案的一部分,正是它提供了DLSS 3帧生成所需要的计算资源。

但是,通过硬件执行算法的缺点就是很难改进,因为它是固定功能单元,即便发现了错误也无法修正。

因此,随着Blackwell的硬件资源足够强大,DLSS 4就放弃了光流加速器硬件方案,改而使用完全基于AI的方案,效率更高,可同时生成三帧,也更灵活。

既然不依赖特定的硬件单元,DLSS 4多帧生成是否也有可能下放给RTX 40系列甚至是RTX 30系列呢?

Bryan Catanzaro没有直接确认或否认,而是解释说,这主要是开发、优化以及关乎用户体验的问题,未来会看看能不能在老一代硬件上也实现。

换言之,从理论上讲,RTX 40/30系列是完全可以跑DLSS 4多帧生成的,但一方面需要大量的适配优化,另一方面它们硬件性能有限,效果也可能不会很理想。

当然,无论出于技术原因,还是其他原因,NVIDIA愿不愿意去做,那就是另外一回事儿了。


TOP

DLSS 4利用DLSS Transformer AI模型代替了原来的硬件光流加速器,加速了光流场的生成,并通过两个AI模型协作,显著降低了额外帧生成的计算成本。

原来是这么替代的,那更不可能了,因为Transformer  模型性能要求更高



TOP

transformer本质就是SVM加上了注意力机制,你说他是高级一点机器学习模型更合适。
主要是chatgpt用了以后又火起来了而已。


TOP

发新话题
     
官方公众号及微博