看高清视频不用开会员，英伟达新技术真有这么厉害？ ...

子非魚_

2 M- @+ t3 S. B3 k* P. {) Y3 F. {前段时间，爱奇艺限制高清内容投屏的事情闹得沸沸扬扬。
+ F5 g  o7 ]  g
) x- q" W) }# l& Q+ Q
0 N, E7 e' J" p2 d0 t
最后在高强度的舆论压力下，爱奇艺还是。。。退了一步？
& q9 Y8 `7 V4 H% _哦，只对老会员退了一步，新会员想要高清投屏，还是要额外花钱的。

) C$ o& S' f/ p4 g5 e
* R4 O/ i" n* P  n; ?7 Y* p
不管爱奇艺这事儿做的有没有谱，但在如今这个万物皆可AI 的时代，视频分辨率不够的问题可能已经不是个事儿了。
  R( v+ X5 f! Q3 o) }+ x就在前几天，英伟达正式实装了一项 AI 视频超分辨率技术，它利用 RTX 显卡的 AI 能力，能把低分辨率（ 小于1440p ）的视频，直接 “ 补像素 ” 显示器的分辨率。


* _8 Y6 n5 S0 z/ V
有差友可能会有疑问，AI 视频修复，这不是一个两年前的火星话题嘛，还能有什么新花样？
你别说，还真有。
传统的 AI 视频修复，往往需要远超视频长度的计算时间，才能输出成片，也就是说，它做不到实时的修复。
2 k, E: O$ i8 R' f5 ^+ W举个例子，up 主“瓜瓜Mars”为了修复一段5 分钟的陶喆演唱会视频，用 1660Ti 跑了三个小时。
4 q2 |, X* [% a$ H7 t  S
. \5 n# y: j1 ?6 _) t
( O: N% f5 K- _+ F
而这次，RTX 视频超分辨率可以在播放视频的同时，把 720p 甚至是 480p 的视频，直接超到 4k！
哎呦，想想都觉得香。
要是老黄的新技术，效果有传统的 AI 修复的八成功力，是不是以后只要不看版权内容，就可以不用为了高清视频开会员了？
! K6 Z2 z9 V- K. D传统AI修复前 ▼
, f2 G! l7 D) X; L# W

1 K( P+ t: E, L  S9 @3 t
修复后 ▼


# C: N- q8 t4 p' p' i8 d& n
* y' F( Q+ T. a$ L7 A3 Q上手试试呗。
先来介绍一下测试环境。
这个 RTX 超分辨率一共分成4档，档位越高，对显卡性能要求就更高，效果更好。
" Z$ U, |7 M" Y& g9 w( a由于要至少要 3070 才能开满4档，所以托尼这次就拖了张 3070Ti 看看效果。
, W* E* h9 b3 m1 y' n2 j


9 S+ [' S& `0 T9 S5 q9 }然后又从小黑胖那借了块 4k 显示器，这样就能把最高到 1080p 的视频，直接优化成 4k。

6 ~$ A  J& R5 F
  L" u* @- U1 g- @& x
装完了高配的测试平台，首先来看看在 B 站上超分辨率的效果如何。
9 C$ T) m9 `1 L& i: b  G毕竟很多 B 站用户并不是来看付费的版权内容的。对于他们来说，充大会员只是为了看高清视频。
* H0 p% A4 k" @' ]老黄的新技术，能击穿叔叔吗？
8 n. l4 ~- Y3 ]8 t4 C) }
& }7 `+ N3 D: j0 L

6 J( p7 F8 B/ V1 Y  D. _' a/ s; V我们找了个差评硬件部的视频，这个视频的 1080p 画质被 B 站压缩的比较狠，看看老黄的新技术能不能给它救回来。
从不开超分辨率，到开 4 挡质量，最明显的变化，就是人物被自动美白了。
1080p 分辨率下效果 ▼
. U- }3 p( O! t6 a  M4 K

/ l& d5 P( M% L  @6 L# T( N; D
至于总体画面质量嘛。。。一眼看上去是没有啥的，但要说它开了和没开一样，那也不至于。
细节上，画质的确有提升，边缘明显锐利一些。

' z1 _5 k& M' O; y- z4 n
  b3 B, O+ y; t( o
但真要说它带来了什么整体观感上的变化？
( y. c2 o! C, x/ @9 ^6 e
4 \4 o' t7 a0 q9 Y8 f

几乎没有吧。。。
分辨率1080p ▼
5 R9 b5 @; E2 x( k, v0 c3 P2 y


而且真要和原生 4k 比起来，那还是差了不止一点。
; c2 E# C& P: ]9 l0 m) m
: A/ r7 b' d) C( B, X  v/ o
+ q; a& |- d8 `) h3 @
既然把 1080p 超到 4k 效果不显著，那在原视频是 720p 的情况下呢？
腾讯视频和爱奇艺的免费用户，最高就只能享受 720p 的“准高清”视频，英伟达的这个技术，有没有可能是考虑到这种情况？
# D1 A) C! I: |" e: g8 H
  G* T. ]1 |9 t+ d; D7 w; M- a! c) P
# t1 C, y* U8 a7 K
& E0 v, M- y3 a5 A- z先说结论：有效果，但是由于原始视频质量实在太低，在一些场景效果惨不忍睹。
) ]; a  S7 M+ c4 V2 }5 B8 n8 u在几乎静态的景物画面里，能很明显的看出开了超分辨率后画面清爽了很多，甚至压缩造成的色块都消失了。
腾讯视频720p ▼



比较静态的人物也优化的不错，至少美颜效果有了。
爱奇艺720p ▼

. V9 o5 v% M! C- c5 c' ?
2 d* Q, r8 n) z2 ?
而到了运动场景，那就完全是翻车现场。
/ K, O' L, [% IAI 超分辨率最应该解决的问题 —— 视频过度压缩产生的色块，竟然完全没有修复。
这就让视频整体观感变化不大，依然一坨，清晰干净不起来。
4 i! N& M$ m3 T. d, {. H# T* u腾讯视频720p ▼
1 i+ d! s0 C/ j
: {) Z3 I3 H' o% D- k
6 W1 N0 L3 g7 _5 D
而场景中快速运动的人，更是让情况恶化了。
: H0 W; i+ g  h6 k; ~8 [都说看 AI 先看手，没想到这个用在生成式AI上的定律，在超分辨率 AI 上也有用。
# G' Y  [- n6 T哼哼，露出 AI 脚了吧 ▼


6 U, l/ @+ R1 @2 \, H; U
2 I! @0 t" i/ c% Y  o除了 AI 的传统艺能，它甚至还会往人类脸上 P 一对酒窝。。。
5 R  t7 b7 G% |# s0 D* E6 F其实是AI伪影，上一帧的衣领被AI当成酒窝留下来了 ▼
  q9 c7 F" p# k- i


就以目前这个表现，这种实时超分辨率的 AI 还是砸不了视频网站的饭碗。
2 s: L7 x) k1 D" W/ i( Y0 F总而言之，目前 RTX 视频超分辨率只在比较窄的场景有明显的提升，并没有两年前 AI 修复视频那种焕然一新的感觉。
. R/ G2 E2 [( U要知道，之前的 AI 修复可是能把一个 DVD
* X: L1 `4 ]8 b  c# Q1 [（ 720×480 ）分辨率的视频修到 4k 级别的清晰！
瓜瓜Mars，【4K修复】陶喆《Melody》史上最强现场版 ▼
4 a& V' |5 h- N$ P

: o1 v4 ?: L4 q
* G+ ?& B1 p6 A" N6 Q! o- m$ `% ^: J* m如果在未来，随着 AI 能力和显卡算力的进步，实时生成的超分辨率视频也能接近传统 AI 修复的水平，那它或许真的能带来一些变化。
比如像画质不清晰的老电影或者老电视剧，现在想看高清还需要人工修复，以后直接交给显卡，它实时边修我们边看也不是不可能。
不过现在这效果，还是挺图一乐的，有 30、40 系 N 卡的差友不妨可以试试。

hilalchemist

太炫酷了,满满的科技感