看高清视频不用开会员，英伟达新技术真有这么厉害？ ...

子非魚_

/ X, t6 f/ k/ S- o1 I4 G

前段时间，爱奇艺限制高清内容投屏的事情闹得沸沸扬扬。


1 @4 A3 ?; i) p3 j. n7 _
最后在高强度的舆论压力下，爱奇艺还是。。。退了一步？
1 s, R' ~, V: A: Z/ X- j8 T3 l哦，只对老会员退了一步，新会员想要高清投屏，还是要额外花钱的。
5 f# l* S7 [5 U6 s% o1 S" l2 `
  b9 e2 }& Q8 P# l- h/ s
3 z5 I. k9 S; K+ H5 B' Q/ f3 v
( T4 {9 {/ S) C/ R不管爱奇艺这事儿做的有没有谱，但在如今这个万物皆可AI 的时代，视频分辨率不够的问题可能已经不是个事儿了。
就在前几天，英伟达正式实装了一项 AI 视频超分辨率技术，它利用 RTX 显卡的 AI 能力，能把低分辨率（ 小于1440p ）的视频，直接 “ 补像素 ” 显示器的分辨率。

  N' [4 P) P0 R& Z* T
! W# y  s& r# R) }( e
- F) j" n# Z" R8 G2 o6 T有差友可能会有疑问，AI 视频修复，这不是一个两年前的火星话题嘛，还能有什么新花样？
你别说，还真有。
传统的 AI 视频修复，往往需要远超视频长度的计算时间，才能输出成片，也就是说，它做不到实时的修复。
) K; o: c0 X+ k/ e$ d举个例子，up 主“瓜瓜Mars”为了修复一段5 分钟的陶喆演唱会视频，用 1660Ti 跑了三个小时。
2 S  v. @2 Y# X6 v

  F: N; v0 H8 O8 q& O
: t6 g1 n* l: I而这次，RTX 视频超分辨率可以在播放视频的同时，把 720p 甚至是 480p 的视频，直接超到 4k！
" B- w! _0 m7 g, c& v哎呦，想想都觉得香。
/ C+ I: t- J6 R5 k要是老黄的新技术，效果有传统的 AI 修复的八成功力，是不是以后只要不看版权内容，就可以不用为了高清视频开会员了？
* D! N5 O5 b; e6 [传统AI修复前 ▼


* u7 h6 F/ ?  l4 `0 D4 b
修复后 ▼
8 F+ k, E) P/ n8 _

4 r8 q& h9 S6 G2 q6 L4 `
上手试试呗。
先来介绍一下测试环境。
4 C$ W& o1 o! d( Q2 H" J7 f7 n这个 RTX 超分辨率一共分成4档，档位越高，对显卡性能要求就更高，效果更好。
7 @- f* F& V" i* ]: o! H! N+ S由于要至少要 3070 才能开满4档，所以托尼这次就拖了张 3070Ti 看看效果。


& n7 h. D; r* h" L* z. v
/ N9 J* T$ ]- Q6 e9 h# P然后又从小黑胖那借了块 4k 显示器，这样就能把最高到 1080p 的视频，直接优化成 4k。


2 Z% O6 z. y: P* p3 i( w
1 Z6 m9 d; c$ p5 Z5 g8 g8 n装完了高配的测试平台，首先来看看在 B 站上超分辨率的效果如何。
毕竟很多 B 站用户并不是来看付费的版权内容的。对于他们来说，充大会员只是为了看高清视频。
老黄的新技术，能击穿叔叔吗？


& a5 d- c0 W# E/ @  n8 n2 U
8 C6 m% _4 N% p4 c4 H我们找了个差评硬件部的视频，这个视频的 1080p 画质被 B 站压缩的比较狠，看看老黄的新技术能不能给它救回来。
  N+ d: c5 @8 a4 U6 o( Z从不开超分辨率，到开 4 挡质量，最明显的变化，就是人物被自动美白了。
7 I; ^( b) o' \) t1080p 分辨率下效果 ▼



至于总体画面质量嘛。。。一眼看上去是没有啥的，但要说它开了和没开一样，那也不至于。
8 ^- Y5 @9 F9 R% T) j细节上，画质的确有提升，边缘明显锐利一些。
- z% o6 M6 G" K, p% F2 s4 T


$ d* m9 Z: M1 }: W5 K: n+ q但真要说它带来了什么整体观感上的变化？
3 j) j3 c- V* W

7 [+ M0 z+ I  K  O- i! l
" O8 q( A' u! L+ i6 B: u+ i) U几乎没有吧。。。
分辨率1080p ▼



- \  k, o$ }$ q# Q) i# l* C而且真要和原生 4k 比起来，那还是差了不止一点。

: m9 _1 k5 b6 f+ `! w* Z
2 C# G2 D  ^7 D0 U$ ^& `/ l
既然把 1080p 超到 4k 效果不显著，那在原视频是 720p 的情况下呢？
腾讯视频和爱奇艺的免费用户，最高就只能享受 720p 的“准高清”视频，英伟达的这个技术，有没有可能是考虑到这种情况？



. Q2 V+ w) ~& }/ @2 P先说结论：有效果，但是由于原始视频质量实在太低，在一些场景效果惨不忍睹。
4 z5 t% Y1 h( @. A8 I! o在几乎静态的景物画面里，能很明显的看出开了超分辨率后画面清爽了很多，甚至压缩造成的色块都消失了。
腾讯视频720p ▼

8 o% @  T7 ~, Y2 i; ?8 ]

比较静态的人物也优化的不错，至少美颜效果有了。
$ |7 G3 J0 S. y爱奇艺720p ▼



而到了运动场景，那就完全是翻车现场。
AI 超分辨率最应该解决的问题 —— 视频过度压缩产生的色块，竟然完全没有修复。
这就让视频整体观感变化不大，依然一坨，清晰干净不起来。
( i. E8 A2 C# Z, s9 u- t1 _腾讯视频720p ▼


7 s* ~& @+ U/ ?
而场景中快速运动的人，更是让情况恶化了。
都说看 AI 先看手，没想到这个用在生成式AI上的定律，在超分辨率 AI 上也有用。
哼哼，露出 AI 脚了吧 ▼
( R$ }% u) e  p% f0 A

! F: v* o. c8 T* m" p% t
除了 AI 的传统艺能，它甚至还会往人类脸上 P 一对酒窝。。。
! [- M) n" \1 x$ n( u# y; Q( ^其实是AI伪影，上一帧的衣领被AI当成酒窝留下来了 ▼
2 ?" A( V1 {  {: z6 Y
! s5 r& `& d4 o9 _) T& R

就以目前这个表现，这种实时超分辨率的 AI 还是砸不了视频网站的饭碗。
总而言之，目前 RTX 视频超分辨率只在比较窄的场景有明显的提升，并没有两年前 AI 修复视频那种焕然一新的感觉。
要知道，之前的 AI 修复可是能把一个 DVD
, ]) a+ P' e8 F7 q6 ]9 T（ 720×480 ）分辨率的视频修到 4k 级别的清晰！
; C. B& r3 [% d( C  _瓜瓜Mars，【4K修复】陶喆《Melody》史上最强现场版 ▼



* p. q* ]6 X+ Y/ a如果在未来，随着 AI 能力和显卡算力的进步，实时生成的超分辨率视频也能接近传统 AI 修复的水平，那它或许真的能带来一些变化。
比如像画质不清晰的老电影或者老电视剧，现在想看高清还需要人工修复，以后直接交给显卡，它实时边修我们边看也不是不可能。
不过现在这效果，还是挺图一乐的，有 30、40 系 N 卡的差友不妨可以试试。
6 L9 N0 v2 S9 r& b8 K

hilalchemist

太炫酷了,满满的科技感