看高清视频不用开会员，英伟达新技术真有这么厉害？ ...

子非魚_

6 [( N7 U& B  M) v  w" g: G
0 u: T" Y' ~+ v3 X# _前段时间，爱奇艺限制高清内容投屏的事情闹得沸沸扬扬。
3 u% ?/ ~6 s% s1 a/ B1 T- Q, i
% d/ L5 }2 O' X! h5 f, y9 \

最后在高强度的舆论压力下，爱奇艺还是。。。退了一步？
- M' `4 v" k' X0 T0 P哦，只对老会员退了一步，新会员想要高清投屏，还是要额外花钱的。

. j9 ~* s3 p' t: R; {

# y  F7 h: F4 U不管爱奇艺这事儿做的有没有谱，但在如今这个万物皆可AI 的时代，视频分辨率不够的问题可能已经不是个事儿了。
就在前几天，英伟达正式实装了一项 AI 视频超分辨率技术，它利用 RTX 显卡的 AI 能力，能把低分辨率（ 小于1440p ）的视频，直接 “ 补像素 ” 显示器的分辨率。



2 `6 r. k: U& h% n# A) W- Z有差友可能会有疑问，AI 视频修复，这不是一个两年前的火星话题嘛，还能有什么新花样？
你别说，还真有。
0 a" X1 _7 @" y4 S9 R$ T/ S传统的 AI 视频修复，往往需要远超视频长度的计算时间，才能输出成片，也就是说，它做不到实时的修复。
. m; `" f% @2 {$ [: T举个例子，up 主“瓜瓜Mars”为了修复一段5 分钟的陶喆演唱会视频，用 1660Ti 跑了三个小时。
8 @2 i. q4 A8 r
, P& d- {! M/ S2 n
9 m- {, H3 M+ C/ A0 r
9 j' P& a" A) P9 n* f4 R  u而这次，RTX 视频超分辨率可以在播放视频的同时，把 720p 甚至是 480p 的视频，直接超到 4k！
3 M/ t3 k1 p" |8 a1 B9 ^哎呦，想想都觉得香。
要是老黄的新技术，效果有传统的 AI 修复的八成功力，是不是以后只要不看版权内容，就可以不用为了高清视频开会员了？
传统AI修复前 ▼
0 [( V6 h2 ~) `2 E


8 t, G- ^8 I) H1 \1 D+ M修复后 ▼
9 T7 d( z' I7 R6 J" n
# h! j: p) ~6 Q* P  L7 ^
8 X7 `* O; c8 N, }4 P
上手试试呗。
" F$ f1 @1 x( E先来介绍一下测试环境。
这个 RTX 超分辨率一共分成4档，档位越高，对显卡性能要求就更高，效果更好。
由于要至少要 3070 才能开满4档，所以托尼这次就拖了张 3070Ti 看看效果。


! K6 k6 V7 B2 y& X7 W2 l
/ \8 g" {  T; L; Y* D7 B) K然后又从小黑胖那借了块 4k 显示器，这样就能把最高到 1080p 的视频，直接优化成 4k。


- S5 R* @! c0 s4 B" V6 h" n
0 F' t9 y% r. O3 Z装完了高配的测试平台，首先来看看在 B 站上超分辨率的效果如何。
2 B2 I# C# u0 }+ C1 @毕竟很多 B 站用户并不是来看付费的版权内容的。对于他们来说，充大会员只是为了看高清视频。
' {3 f( @7 B: Y" ?( \; _老黄的新技术，能击穿叔叔吗？


" L# V0 X! O+ T/ c
我们找了个差评硬件部的视频，这个视频的 1080p 画质被 B 站压缩的比较狠，看看老黄的新技术能不能给它救回来。
从不开超分辨率，到开 4 挡质量，最明显的变化，就是人物被自动美白了。
! e$ \1 J* I& D1080p 分辨率下效果 ▼
" G9 _9 m" @0 J  |7 H" w

% l* P/ o1 S" Q" Q9 e: J" v$ r% w2 m7 Y
! t/ ]3 n7 k0 R$ ~. h$ y5 P3 _至于总体画面质量嘛。。。一眼看上去是没有啥的，但要说它开了和没开一样，那也不至于。
细节上，画质的确有提升，边缘明显锐利一些。
7 \7 Y5 j% ?* `1 ?3 @, ^" E, r

! ^& q7 l; T" \+ p0 ^
但真要说它带来了什么整体观感上的变化？



几乎没有吧。。。
' x7 {$ R: N: R; G; T5 }分辨率1080p ▼

( S3 C/ O2 Y- h$ o
3 ^3 a0 _  s: ?4 V' `* a
9 U* l: G* h& y0 n" V* Z3 U而且真要和原生 4k 比起来，那还是差了不止一点。



既然把 1080p 超到 4k 效果不显著，那在原视频是 720p 的情况下呢？
腾讯视频和爱奇艺的免费用户，最高就只能享受 720p 的“准高清”视频，英伟达的这个技术，有没有可能是考虑到这种情况？

/ @+ t3 q: i! T2 v5 N4 e8 Z- P
2 a% h1 e& K: z6 ~
0 |! R' N2 X2 a" O: _先说结论：有效果，但是由于原始视频质量实在太低，在一些场景效果惨不忍睹。
* K6 z7 F; j4 M/ {( d在几乎静态的景物画面里，能很明显的看出开了超分辨率后画面清爽了很多，甚至压缩造成的色块都消失了。
腾讯视频720p ▼
6 f2 P5 s+ c2 |! @' I& i* E


7 D* |( ?& B7 S# h比较静态的人物也优化的不错，至少美颜效果有了。
, r8 }3 f. \$ j0 n爱奇艺720p ▼

1 _1 R* [( C* P- T

而到了运动场景，那就完全是翻车现场。
AI 超分辨率最应该解决的问题 —— 视频过度压缩产生的色块，竟然完全没有修复。
, Y( T/ n5 b- F; n/ E( i这就让视频整体观感变化不大，依然一坨，清晰干净不起来。
腾讯视频720p ▼


1 L: T& T0 t, X8 @0 A
而场景中快速运动的人，更是让情况恶化了。
都说看 AI 先看手，没想到这个用在生成式AI上的定律，在超分辨率 AI 上也有用。
- g% ^  G: P3 M8 I& |哼哼，露出 AI 脚了吧 ▼
" M- c- u$ F0 }; V5 l. M

7 z9 `3 C5 ^# t* p
- C4 X) O' s* o: i7 g6 |4 g1 m除了 AI 的传统艺能，它甚至还会往人类脸上 P 一对酒窝。。。
, X2 E1 n) @- W7 \2 m  X5 H其实是AI伪影，上一帧的衣领被AI当成酒窝留下来了 ▼
3 N$ O( ^4 ]6 U; _+ L' ^2 n
, r  J. }( F# M0 f

6 I( y: n  D' _就以目前这个表现，这种实时超分辨率的 AI 还是砸不了视频网站的饭碗。
1 ^. j6 P+ m- a2 @7 K5 m总而言之，目前 RTX 视频超分辨率只在比较窄的场景有明显的提升，并没有两年前 AI 修复视频那种焕然一新的感觉。
要知道，之前的 AI 修复可是能把一个 DVD
（ 720×480 ）分辨率的视频修到 4k 级别的清晰！
瓜瓜Mars，【4K修复】陶喆《Melody》史上最强现场版 ▼


* S! m8 X/ ]. p& r2 v
4 O2 o  n$ G8 J2 u/ ^如果在未来，随着 AI 能力和显卡算力的进步，实时生成的超分辨率视频也能接近传统 AI 修复的水平，那它或许真的能带来一些变化。
比如像画质不清晰的老电影或者老电视剧，现在想看高清还需要人工修复，以后直接交给显卡，它实时边修我们边看也不是不可能。
不过现在这效果，还是挺图一乐的，有 30、40 系 N 卡的差友不妨可以试试。

hilalchemist

太炫酷了,满满的科技感