看高清视频不用开会员，英伟达新技术真有这么厉害？ ...

子非魚_

5 M6 l0 _4 ~' Y# f" ~6 o" @* n& b

! J) U; N! }  @, e% ~, M前段时间，爱奇艺限制高清内容投屏的事情闹得沸沸扬扬。
+ o' @! G! r2 p+ }' g: \; q

/ r5 s% P  t) O# o+ u
最后在高强度的舆论压力下，爱奇艺还是。。。退了一步？
哦，只对老会员退了一步，新会员想要高清投屏，还是要额外花钱的。
- s4 H# P& m& O: c. {
. H' I9 r3 i( H% {! k" Z, _5 Y

1 C% T. Y/ m* g9 Y) T; o, N6 q. u1 H不管爱奇艺这事儿做的有没有谱，但在如今这个万物皆可AI 的时代，视频分辨率不够的问题可能已经不是个事儿了。
7 D' t. O7 a' S, q就在前几天，英伟达正式实装了一项 AI 视频超分辨率技术，它利用 RTX 显卡的 AI 能力，能把低分辨率（ 小于1440p ）的视频，直接 “ 补像素 ” 显示器的分辨率。

! a7 g3 Y9 C5 p) R0 s3 y
7 w6 N& Y% Z: g, F+ x
有差友可能会有疑问，AI 视频修复，这不是一个两年前的火星话题嘛，还能有什么新花样？
你别说，还真有。
! |4 I# g9 K& d1 j传统的 AI 视频修复，往往需要远超视频长度的计算时间，才能输出成片，也就是说，它做不到实时的修复。
8 x8 P& |$ f0 K5 o" n1 b! ~举个例子，up 主“瓜瓜Mars”为了修复一段5 分钟的陶喆演唱会视频，用 1660Ti 跑了三个小时。
: k; i; ]! k6 O

; g* V! n9 r& ]: \8 Y* T2 Q( I1 V+ V
: \: e2 v" ^- M& a! `而这次，RTX 视频超分辨率可以在播放视频的同时，把 720p 甚至是 480p 的视频，直接超到 4k！
7 e/ u' k+ r/ ~5 V$ n. Z% c% O4 }8 E哎呦，想想都觉得香。
要是老黄的新技术，效果有传统的 AI 修复的八成功力，是不是以后只要不看版权内容，就可以不用为了高清视频开会员了？
5 P' [% p! Y4 Q0 {3 p6 M传统AI修复前 ▼
# U6 `* ?4 r% }# M; [+ A$ ^/ e. \8 Z
( Q0 o/ S8 L9 b' m2 r, ~& \& |3 T
8 D$ U( J. b# ?# V& v
' I  ]7 Z: e0 {9 t) w9 e, ]修复后 ▼
3 P/ M; B1 j7 [/ s/ H
  S5 o' P' A1 g! x1 Y
+ z3 w# h4 ]3 C& d8 t
1 r2 Z0 c+ L) {/ |( P上手试试呗。
先来介绍一下测试环境。
' S, I! c3 ~0 O4 e7 X2 [这个 RTX 超分辨率一共分成4档，档位越高，对显卡性能要求就更高，效果更好。
由于要至少要 3070 才能开满4档，所以托尼这次就拖了张 3070Ti 看看效果。
: h9 ^: ]7 w3 s, }3 {9 J" ~4 w
' W% W+ Y& }% c6 v
8 t6 r7 f( ?% t" z  d
然后又从小黑胖那借了块 4k 显示器，这样就能把最高到 1080p 的视频，直接优化成 4k。

& O/ [3 ]* _; U$ s& @
9 h) U4 I/ U, S; N" Q
装完了高配的测试平台，首先来看看在 B 站上超分辨率的效果如何。
/ n* v5 \! w8 ?: ~4 R毕竟很多 B 站用户并不是来看付费的版权内容的。对于他们来说，充大会员只是为了看高清视频。
老黄的新技术，能击穿叔叔吗？

( z# X1 f7 c' v# g* L2 f( Y

我们找了个差评硬件部的视频，这个视频的 1080p 画质被 B 站压缩的比较狠，看看老黄的新技术能不能给它救回来。
从不开超分辨率，到开 4 挡质量，最明显的变化，就是人物被自动美白了。
1080p 分辨率下效果 ▼
4 R! N6 b- e, h8 Z+ J! q  J
& E6 R# G2 f8 g2 U

至于总体画面质量嘛。。。一眼看上去是没有啥的，但要说它开了和没开一样，那也不至于。
! Y, \& w( o8 ^( W8 o, [# \1 F细节上，画质的确有提升，边缘明显锐利一些。

1 g4 _8 e$ R3 `

- Q$ H4 `7 O) }  @; R- ^! T但真要说它带来了什么整体观感上的变化？



几乎没有吧。。。
4 n, o5 R  L1 {6 o分辨率1080p ▼


9 ^+ C) Y. h$ s/ p( a/ d5 t% `
3 k& ?2 B# w' H* P0 \) U8 D而且真要和原生 4k 比起来，那还是差了不止一点。
# T/ a2 E' b$ R+ B8 t


# N1 y2 k. r" `既然把 1080p 超到 4k 效果不显著，那在原视频是 720p 的情况下呢？
' K) `5 s" t1 z" r4 O2 ?腾讯视频和爱奇艺的免费用户，最高就只能享受 720p 的“准高清”视频，英伟达的这个技术，有没有可能是考虑到这种情况？
, \1 W& F3 S6 M  l9 a) G
" @' F# }+ e% r) @- h
1 k& c! }" ?+ T0 G- X4 A9 p
+ F0 H! _6 r5 x" [+ `+ u$ |1 ^先说结论：有效果，但是由于原始视频质量实在太低，在一些场景效果惨不忍睹。
在几乎静态的景物画面里，能很明显的看出开了超分辨率后画面清爽了很多，甚至压缩造成的色块都消失了。
, z' d$ P! E5 J9 b; A腾讯视频720p ▼
; b9 A: D; m3 t
9 `9 v! q6 ?1 i/ v

5 l! Z; i/ X# j比较静态的人物也优化的不错，至少美颜效果有了。
3 U" i, y- N3 M爱奇艺720p ▼
0 U$ B$ M* `5 j

% X% n" h5 K8 W# v4 ?; n- r8 b
7 t/ `( f) S  ]2 l4 D% \* \而到了运动场景，那就完全是翻车现场。
AI 超分辨率最应该解决的问题 —— 视频过度压缩产生的色块，竟然完全没有修复。
这就让视频整体观感变化不大，依然一坨，清晰干净不起来。
腾讯视频720p ▼
* e1 S5 C2 D' ?* O' C4 ~

9 G0 i* z& R2 C0 M! P! L
而场景中快速运动的人，更是让情况恶化了。
都说看 AI 先看手，没想到这个用在生成式AI上的定律，在超分辨率 AI 上也有用。
哼哼，露出 AI 脚了吧 ▼
8 z0 ]9 Z6 Z7 z8 V- B- i, f& E( E

' t' ^3 ^  ~: N) ~7 b. G
除了 AI 的传统艺能，它甚至还会往人类脸上 P 一对酒窝。。。
) a& @1 X  [* N+ y3 E: N* G7 P其实是AI伪影，上一帧的衣领被AI当成酒窝留下来了 ▼
- m5 t+ a. [0 D( w& t8 _
, ~3 g% b, {6 _: w/ a( P

: W/ Q1 G1 V4 l6 ]8 B3 X1 B/ Z就以目前这个表现，这种实时超分辨率的 AI 还是砸不了视频网站的饭碗。
+ d$ h7 x* L& V3 w, Q/ o总而言之，目前 RTX 视频超分辨率只在比较窄的场景有明显的提升，并没有两年前 AI 修复视频那种焕然一新的感觉。
要知道，之前的 AI 修复可是能把一个 DVD
（ 720×480 ）分辨率的视频修到 4k 级别的清晰！
7 y0 t7 j7 P( ]7 C瓜瓜Mars，【4K修复】陶喆《Melody》史上最强现场版 ▼
$ S5 U2 V6 t9 r. g4 }# t) D
4 F& p; |2 Y, f+ v
! y8 ], m; D6 g5 f0 H
如果在未来，随着 AI 能力和显卡算力的进步，实时生成的超分辨率视频也能接近传统 AI 修复的水平，那它或许真的能带来一些变化。
比如像画质不清晰的老电影或者老电视剧，现在想看高清还需要人工修复，以后直接交给显卡，它实时边修我们边看也不是不可能。
不过现在这效果，还是挺图一乐的，有 30、40 系 N 卡的差友不妨可以试试。

hilalchemist

太炫酷了,满满的科技感