看高清视频不用开会员，英伟达新技术真有这么厉害？ ...

子非魚_

& A: R+ s1 R7 x
6 ^# H" u) j* e& I前段时间，爱奇艺限制高清内容投屏的事情闹得沸沸扬扬。
. U* u9 N. o/ R! E+ L1 j

. v* @* g3 v7 c1 D6 l/ ?9 m6 k  ~
最后在高强度的舆论压力下，爱奇艺还是。。。退了一步？
6 Q2 C$ h8 D; H- r6 A4 e& |" Q哦，只对老会员退了一步，新会员想要高清投屏，还是要额外花钱的。

" z$ l. c7 \* J# @; m( F$ R( ]

不管爱奇艺这事儿做的有没有谱，但在如今这个万物皆可AI 的时代，视频分辨率不够的问题可能已经不是个事儿了。
5 Q( G) I2 c8 ?$ F9 f8 e5 }就在前几天，英伟达正式实装了一项 AI 视频超分辨率技术，它利用 RTX 显卡的 AI 能力，能把低分辨率（ 小于1440p ）的视频，直接 “ 补像素 ” 显示器的分辨率。

# X4 G% m$ T( Y" x3 u7 M6 s
) N$ a: l$ c' q7 e/ G( F" `6 V
* \6 U' S! D. K$ f5 D* B# R有差友可能会有疑问，AI 视频修复，这不是一个两年前的火星话题嘛，还能有什么新花样？
. a. g" `: E7 y你别说，还真有。
传统的 AI 视频修复，往往需要远超视频长度的计算时间，才能输出成片，也就是说，它做不到实时的修复。
4 h$ F& s& X+ h# }5 S0 J. c2 R2 O举个例子，up 主“瓜瓜Mars”为了修复一段5 分钟的陶喆演唱会视频，用 1660Ti 跑了三个小时。


% e. ]+ A3 z9 U) t2 S
而这次，RTX 视频超分辨率可以在播放视频的同时，把 720p 甚至是 480p 的视频，直接超到 4k！
哎呦，想想都觉得香。
) [: p. o* I9 g: S9 K& H+ H7 x要是老黄的新技术，效果有传统的 AI 修复的八成功力，是不是以后只要不看版权内容，就可以不用为了高清视频开会员了？
( o. s; g5 D! I: Q( q2 A2 m) \2 h传统AI修复前 ▼


6 a5 E1 O' J+ N" t9 r( b. U7 b
# e2 u3 }/ w4 j1 `  ]2 K修复后 ▼
9 q, T8 i7 G7 t# @: r
& X6 H" c& V7 C

上手试试呗。
先来介绍一下测试环境。
这个 RTX 超分辨率一共分成4档，档位越高，对显卡性能要求就更高，效果更好。
# ]/ Y  T4 }# ^* g) ?: ?8 _3 B7 G由于要至少要 3070 才能开满4档，所以托尼这次就拖了张 3070Ti 看看效果。
7 S( ]5 X( k8 m7 C2 I" x

; _% P4 }: [% \
然后又从小黑胖那借了块 4k 显示器，这样就能把最高到 1080p 的视频，直接优化成 4k。
9 l" E7 c+ C2 |9 t( Z' `5 l; ~# Y
, [/ y/ W5 ]2 i+ T
5 T( d8 w1 t# Y2 o) Y
装完了高配的测试平台，首先来看看在 B 站上超分辨率的效果如何。
* k8 G8 y$ {* C) N毕竟很多 B 站用户并不是来看付费的版权内容的。对于他们来说，充大会员只是为了看高清视频。
老黄的新技术，能击穿叔叔吗？



我们找了个差评硬件部的视频，这个视频的 1080p 画质被 B 站压缩的比较狠，看看老黄的新技术能不能给它救回来。
0 V" B* F8 M% b4 m$ _/ R2 W从不开超分辨率，到开 4 挡质量，最明显的变化，就是人物被自动美白了。
1080p 分辨率下效果 ▼
7 S2 f- P/ s1 R" @
0 s0 J6 r1 ]& Z0 L* n+ R
* D/ @5 g) {+ |9 J, t
1 D+ L. m* g( y5 {2 V$ [% @) W至于总体画面质量嘛。。。一眼看上去是没有啥的，但要说它开了和没开一样，那也不至于。
2 S1 \) O  }, p5 v细节上，画质的确有提升，边缘明显锐利一些。
0 [/ l3 z: v: a5 T; P

( V0 i0 M% A& F
) p( a: l, D7 }+ P/ q) V" u: s; ~但真要说它带来了什么整体观感上的变化？
, D. Z/ j, v1 x: _* Q
# V2 P9 }( K' m) o2 V

几乎没有吧。。。
8 w# F+ ?' z" c0 ]# b4 v3 ~分辨率1080p ▼

( \: r) j* l+ g9 d9 x) d
% b7 N. Y1 j4 p1 r% w) a7 P
而且真要和原生 4k 比起来，那还是差了不止一点。
; l$ g7 ]8 M" A4 w
7 C* O/ i6 m2 d0 U6 m2 u: f

) I' G8 m/ _0 K+ V4 r既然把 1080p 超到 4k 效果不显著，那在原视频是 720p 的情况下呢？
腾讯视频和爱奇艺的免费用户，最高就只能享受 720p 的“准高清”视频，英伟达的这个技术，有没有可能是考虑到这种情况？
3 v! s6 G8 S8 v' n


先说结论：有效果，但是由于原始视频质量实在太低，在一些场景效果惨不忍睹。
在几乎静态的景物画面里，能很明显的看出开了超分辨率后画面清爽了很多，甚至压缩造成的色块都消失了。
5 _4 t4 m( }) l/ P9 l7 `腾讯视频720p ▼
& {7 t# \( d6 Y! W
: S( Q* q# I  v. H6 U; g

: N! S0 ^' ^6 D# W6 u* }8 x: j# G+ i比较静态的人物也优化的不错，至少美颜效果有了。
" S, j! F5 {) f( f爱奇艺720p ▼

% a/ e9 t- O+ R9 b  Q" F' _7 @

而到了运动场景，那就完全是翻车现场。
* S; v* F, ?! ^, ^2 I" \$ mAI 超分辨率最应该解决的问题 —— 视频过度压缩产生的色块，竟然完全没有修复。
" I6 ], K& q; _( t2 \这就让视频整体观感变化不大，依然一坨，清晰干净不起来。
腾讯视频720p ▼

* V! S/ P& N3 E% Z5 u) y; r3 |

而场景中快速运动的人，更是让情况恶化了。
% R' P- E- ^+ w9 ?+ f2 f* V: K9 O都说看 AI 先看手，没想到这个用在生成式AI上的定律，在超分辨率 AI 上也有用。
& D, ]8 F( {5 f3 _* B- I1 ?$ Z哼哼，露出 AI 脚了吧 ▼
' u9 s) q6 }+ V' \3 W" A3 ~
: R4 ^( O7 y- [+ \0 \& u* v
8 _5 m2 D5 x9 u: c2 m1 Y8 c- F8 @
5 c( {1 b$ V+ h' G5 g7 n: q除了 AI 的传统艺能，它甚至还会往人类脸上 P 一对酒窝。。。
其实是AI伪影，上一帧的衣领被AI当成酒窝留下来了 ▼
. |1 H% x( e* R: W. L
& V1 f+ M5 O: y

/ @- u) }5 H( c0 V: e' X8 h就以目前这个表现，这种实时超分辨率的 AI 还是砸不了视频网站的饭碗。
总而言之，目前 RTX 视频超分辨率只在比较窄的场景有明显的提升，并没有两年前 AI 修复视频那种焕然一新的感觉。
要知道，之前的 AI 修复可是能把一个 DVD
（ 720×480 ）分辨率的视频修到 4k 级别的清晰！
瓜瓜Mars，【4K修复】陶喆《Melody》史上最强现场版 ▼
; T: }1 I( v8 ^* t8 d3 b0 s+ D  v

) M4 C& \/ ^" m$ o* R0 `! [6 a
如果在未来，随着 AI 能力和显卡算力的进步，实时生成的超分辨率视频也能接近传统 AI 修复的水平，那它或许真的能带来一些变化。
比如像画质不清晰的老电影或者老电视剧，现在想看高清还需要人工修复，以后直接交给显卡，它实时边修我们边看也不是不可能。
不过现在这效果，还是挺图一乐的，有 30、40 系 N 卡的差友不妨可以试试。
- Q5 `; O! D/ ]' r

hilalchemist

太炫酷了,满满的科技感