看高清视频不用开会员，英伟达新技术真有这么厉害？ ...

子非魚_

/ b. Q. d0 A3 h  B
前段时间，爱奇艺限制高清内容投屏的事情闹得沸沸扬扬。
' o/ e+ s$ }) o' @# V' c
( w+ z  y6 B/ a: N2 L) L
( m; P, A9 r1 j( Y/ {5 r
3 x4 c* x) q! g' S最后在高强度的舆论压力下，爱奇艺还是。。。退了一步？
8 U! l7 S* \+ q哦，只对老会员退了一步，新会员想要高清投屏，还是要额外花钱的。
* i9 Q: }& H) K$ e! w& ?
& j/ Q& d" L5 [
0 J1 V  f7 v3 h
" n: u# g1 c5 s9 U不管爱奇艺这事儿做的有没有谱，但在如今这个万物皆可AI 的时代，视频分辨率不够的问题可能已经不是个事儿了。
! W' k1 Q2 x% N0 P就在前几天，英伟达正式实装了一项 AI 视频超分辨率技术，它利用 RTX 显卡的 AI 能力，能把低分辨率（ 小于1440p ）的视频，直接 “ 补像素 ” 显示器的分辨率。



有差友可能会有疑问，AI 视频修复，这不是一个两年前的火星话题嘛，还能有什么新花样？
: X9 y  [! {( Y" I/ v你别说，还真有。
传统的 AI 视频修复，往往需要远超视频长度的计算时间，才能输出成片，也就是说，它做不到实时的修复。
举个例子，up 主“瓜瓜Mars”为了修复一段5 分钟的陶喆演唱会视频，用 1660Ti 跑了三个小时。
* ?( g' G) a1 [$ o1 D
+ T. r4 Y# Q0 _. P+ O% r
) Q. h5 P8 A. {' _" q  V
而这次，RTX 视频超分辨率可以在播放视频的同时，把 720p 甚至是 480p 的视频，直接超到 4k！
  E$ {3 d+ j* I6 k7 J哎呦，想想都觉得香。
- w0 @7 R3 Q7 D) J( ?0 R) H0 t# o要是老黄的新技术，效果有传统的 AI 修复的八成功力，是不是以后只要不看版权内容，就可以不用为了高清视频开会员了？
传统AI修复前 ▼

' f, t' Y/ [3 ?/ u

修复后 ▼



; r$ Q$ E. ]" n5 }1 T上手试试呗。
. g" n4 U/ R8 W/ g先来介绍一下测试环境。
$ A! a7 h% ~  e- J5 v这个 RTX 超分辨率一共分成4档，档位越高，对显卡性能要求就更高，效果更好。
( J9 O, r/ K7 r3 k+ p: R! Q由于要至少要 3070 才能开满4档，所以托尼这次就拖了张 3070Ti 看看效果。
& C7 l+ }5 p; m+ f% W% V
2 g2 D; T7 T; s0 h. ]8 H; t
3 P# r) q6 ~7 H* c! c( w2 T% b
然后又从小黑胖那借了块 4k 显示器，这样就能把最高到 1080p 的视频，直接优化成 4k。


' I) [+ K6 b9 R! |# \  T5 r
! G! j* [/ a( f) Z, @, R装完了高配的测试平台，首先来看看在 B 站上超分辨率的效果如何。
  [4 T. k7 F( |& w3 S毕竟很多 B 站用户并不是来看付费的版权内容的。对于他们来说，充大会员只是为了看高清视频。
老黄的新技术，能击穿叔叔吗？


3 D( a5 Q) t/ P4 H- c0 ]
' L7 m. a, S$ V1 C: r0 [我们找了个差评硬件部的视频，这个视频的 1080p 画质被 B 站压缩的比较狠，看看老黄的新技术能不能给它救回来。
3 E' K3 U. }$ {. W从不开超分辨率，到开 4 挡质量，最明显的变化，就是人物被自动美白了。
* q- w. d, w* x: w+ a& q1080p 分辨率下效果 ▼

0 f0 e) y* o7 L, e) c% o" g- e

$ c% E1 W5 G2 o2 j, j至于总体画面质量嘛。。。一眼看上去是没有啥的，但要说它开了和没开一样，那也不至于。
细节上，画质的确有提升，边缘明显锐利一些。
2 Y; D# ^* _7 Q8 Z0 Y2 A


9 S+ L$ s# [  b) L. Q' s3 F但真要说它带来了什么整体观感上的变化？
, }' x  {( w# P/ l/ e+ A& ?* H

; ^0 `/ c0 H1 K6 O
几乎没有吧。。。
# R9 O, l- q9 i3 I& N) \! T分辨率1080p ▼
* h. [1 D  r! i% a: O# o) ]

1 q# A' `/ ^9 ~/ `4 ^
) P6 Q1 e. B9 d! v' ?/ Z% x而且真要和原生 4k 比起来，那还是差了不止一点。
0 F7 x( i# ]4 [; }
: o0 _: o1 u- X( i

既然把 1080p 超到 4k 效果不显著，那在原视频是 720p 的情况下呢？
1 [- j, G8 P8 {8 P4 j腾讯视频和爱奇艺的免费用户，最高就只能享受 720p 的“准高清”视频，英伟达的这个技术，有没有可能是考虑到这种情况？
, Q( O2 M9 E. R7 j3 g: x. k/ L& I

/ @: T. x1 f) l$ f% a
先说结论：有效果，但是由于原始视频质量实在太低，在一些场景效果惨不忍睹。
. j& n( l( \7 C  S在几乎静态的景物画面里，能很明显的看出开了超分辨率后画面清爽了很多，甚至压缩造成的色块都消失了。
) r2 H5 m+ W, y腾讯视频720p ▼
" Z& a; @3 K6 y
$ F, @; C& ?* O
. Y* ^6 Q5 a8 j$ {+ c1 W
比较静态的人物也优化的不错，至少美颜效果有了。
) g/ j# b/ \  {( e5 b爱奇艺720p ▼
1 d/ L2 e4 U5 S7 E
  f8 i- ?' p: H0 t$ ?4 d; n# S

6 m- R' C# \( B! ?6 C; I: I而到了运动场景，那就完全是翻车现场。
AI 超分辨率最应该解决的问题 —— 视频过度压缩产生的色块，竟然完全没有修复。
这就让视频整体观感变化不大，依然一坨，清晰干净不起来。
腾讯视频720p ▼
7 Q0 M: }* ?$ N0 h


而场景中快速运动的人，更是让情况恶化了。
都说看 AI 先看手，没想到这个用在生成式AI上的定律，在超分辨率 AI 上也有用。
2 j- F$ x) H& ]# M7 H4 Z哼哼，露出 AI 脚了吧 ▼

$ ^3 w# R+ g# x2 ?# o# M* a, w
) ~* m# u( v, l. a
% j1 w' A$ V* p+ J8 h1 G除了 AI 的传统艺能，它甚至还会往人类脸上 P 一对酒窝。。。
" n1 W9 u; A! S/ I; H其实是AI伪影，上一帧的衣领被AI当成酒窝留下来了 ▼
# B3 ~' c) q! |' i; i
6 s/ G( Z" T: h5 x+ F
* n" V! s% L2 I" j3 j
! P, O$ y/ {0 `就以目前这个表现，这种实时超分辨率的 AI 还是砸不了视频网站的饭碗。
1 o6 c9 w4 @: e) U  Z总而言之，目前 RTX 视频超分辨率只在比较窄的场景有明显的提升，并没有两年前 AI 修复视频那种焕然一新的感觉。
要知道，之前的 AI 修复可是能把一个 DVD
, A2 D2 n# I/ F' N4 D（ 720×480 ）分辨率的视频修到 4k 级别的清晰！
瓜瓜Mars，【4K修复】陶喆《Melody》史上最强现场版 ▼
  A, G* \9 f% J8 V2 S3 \6 k


6 e( |# _0 _3 m- o2 @( f& U如果在未来，随着 AI 能力和显卡算力的进步，实时生成的超分辨率视频也能接近传统 AI 修复的水平，那它或许真的能带来一些变化。
% `1 x4 Q/ }) x! e' ?比如像画质不清晰的老电影或者老电视剧，现在想看高清还需要人工修复，以后直接交给显卡，它实时边修我们边看也不是不可能。
- R- a  t* p1 ]3 o) b: I1 }不过现在这效果，还是挺图一乐的，有 30、40 系 N 卡的差友不妨可以试试。

hilalchemist

太炫酷了,满满的科技感