看高清视频不用开会员，英伟达新技术真有这么厉害？ ...

子非魚_

7 E) G* i) P; n前段时间，爱奇艺限制高清内容投屏的事情闹得沸沸扬扬。
5 I' ]9 y: m4 {7 b4 G; H* M
! y; Y! ~5 Z" h$ W; P$ b9 K
9 ?- o- w/ v8 S
最后在高强度的舆论压力下，爱奇艺还是。。。退了一步？
哦，只对老会员退了一步，新会员想要高清投屏，还是要额外花钱的。
' X$ Q5 {0 A1 w. O8 A4 @


不管爱奇艺这事儿做的有没有谱，但在如今这个万物皆可AI 的时代，视频分辨率不够的问题可能已经不是个事儿了。
5 l0 q" z0 ~4 q9 l; x/ a就在前几天，英伟达正式实装了一项 AI 视频超分辨率技术，它利用 RTX 显卡的 AI 能力，能把低分辨率（ 小于1440p ）的视频，直接 “ 补像素 ” 显示器的分辨率。

+ D6 X2 s$ Y6 ~$ ^9 l; _# j
0 n* F+ [9 H. @0 b! E( q
8 ]6 S! j5 U6 w% q7 u有差友可能会有疑问，AI 视频修复，这不是一个两年前的火星话题嘛，还能有什么新花样？
$ L! p) s! x; F# K# ~; ^- J你别说，还真有。
传统的 AI 视频修复，往往需要远超视频长度的计算时间，才能输出成片，也就是说，它做不到实时的修复。
! h) T, i( @0 H7 h举个例子，up 主“瓜瓜Mars”为了修复一段5 分钟的陶喆演唱会视频，用 1660Ti 跑了三个小时。
4 x2 T( r  e% `8 B8 Y/ i6 N
& J; U7 [7 v+ U, e# q9 ~
) C4 u1 n4 W8 n( l2 H1 O% ]
+ [0 j* z+ \7 r& |% D而这次，RTX 视频超分辨率可以在播放视频的同时，把 720p 甚至是 480p 的视频，直接超到 4k！
. |! \, A9 F( I9 O- q7 L哎呦，想想都觉得香。
% m. |0 B9 G6 i( m" e要是老黄的新技术，效果有传统的 AI 修复的八成功力，是不是以后只要不看版权内容，就可以不用为了高清视频开会员了？
: V* {: m% m) @, Y' ?0 W- f传统AI修复前 ▼

" p& H4 G% o( @3 w9 U- z% ~

6 O- Y1 s: F! l修复后 ▼



上手试试呗。
先来介绍一下测试环境。
3 {, k/ W' ?$ \( z, T1 h0 m这个 RTX 超分辨率一共分成4档，档位越高，对显卡性能要求就更高，效果更好。
由于要至少要 3070 才能开满4档，所以托尼这次就拖了张 3070Ti 看看效果。

8 V8 e9 N8 ^0 R3 m9 k! @

% p: D$ x3 c. Q- @+ D& s然后又从小黑胖那借了块 4k 显示器，这样就能把最高到 1080p 的视频，直接优化成 4k。
1 n  [3 s7 K( n6 {5 o3 F3 a


装完了高配的测试平台，首先来看看在 B 站上超分辨率的效果如何。
毕竟很多 B 站用户并不是来看付费的版权内容的。对于他们来说，充大会员只是为了看高清视频。
老黄的新技术，能击穿叔叔吗？
' N! j; A3 g! j) z; U! O& w

; A! E% N: M0 ?+ K1 y& U" [  m
我们找了个差评硬件部的视频，这个视频的 1080p 画质被 B 站压缩的比较狠，看看老黄的新技术能不能给它救回来。
从不开超分辨率，到开 4 挡质量，最明显的变化，就是人物被自动美白了。
0 D0 }% H- q4 U. {8 j& l/ V1080p 分辨率下效果 ▼
4 x8 l% K# i1 b6 W: Q/ `

: Q: \9 U) o- `
# Z3 i/ K+ q8 T7 z3 ^至于总体画面质量嘛。。。一眼看上去是没有啥的，但要说它开了和没开一样，那也不至于。
" j7 t8 u5 j, ]细节上，画质的确有提升，边缘明显锐利一些。
9 P4 \9 s3 n. e* k9 a0 z! k- a

- A( F2 g4 R- i' I- y
, ~3 I# v7 P0 b% W& `; {' W+ `但真要说它带来了什么整体观感上的变化？
* ^' b1 j4 J# ^
# |+ }4 H8 r! c  ?0 p+ Q

几乎没有吧。。。
分辨率1080p ▼


$ ^. z5 g4 Z3 L7 X$ W2 s+ C
# L3 ?5 X" Y0 {4 ?$ r3 d! V而且真要和原生 4k 比起来，那还是差了不止一点。
9 |( W- B( N0 ~0 t) I& m


既然把 1080p 超到 4k 效果不显著，那在原视频是 720p 的情况下呢？
腾讯视频和爱奇艺的免费用户，最高就只能享受 720p 的“准高清”视频，英伟达的这个技术，有没有可能是考虑到这种情况？

( Y$ m( l* r6 `% y% Y9 N' N

+ V2 l' z% M% R" J3 G9 r先说结论：有效果，但是由于原始视频质量实在太低，在一些场景效果惨不忍睹。
/ i* [( N- B# o1 ]" u4 \% r: H在几乎静态的景物画面里，能很明显的看出开了超分辨率后画面清爽了很多，甚至压缩造成的色块都消失了。
腾讯视频720p ▼
5 X( o5 \6 X  N# s7 N
# ]  _! V$ s$ y; W8 C% s; M
) m, z4 B3 n7 \2 l# Z* P. ^
' u! s6 G8 d% z7 q8 r比较静态的人物也优化的不错，至少美颜效果有了。
爱奇艺720p ▼
& s* h- X0 V3 @" k6 K8 u$ l


9 C- }4 c9 K4 k+ X: A; n而到了运动场景，那就完全是翻车现场。
AI 超分辨率最应该解决的问题 —— 视频过度压缩产生的色块，竟然完全没有修复。
: Q4 ^' ~8 u# X0 {, A8 i这就让视频整体观感变化不大，依然一坨，清晰干净不起来。
8 i) c% @' y1 K! }+ E5 `: d0 Q腾讯视频720p ▼
; [/ q, Y" R1 ]7 N0 ~6 l! [

% v3 w$ a& }0 o
5 X. L' Q5 @$ t5 K( a/ C/ t而场景中快速运动的人，更是让情况恶化了。
都说看 AI 先看手，没想到这个用在生成式AI上的定律，在超分辨率 AI 上也有用。
6 a/ Q1 U7 I* B7 q. {8 i哼哼，露出 AI 脚了吧 ▼



) ^) J  C5 A( S除了 AI 的传统艺能，它甚至还会往人类脸上 P 一对酒窝。。。
其实是AI伪影，上一帧的衣领被AI当成酒窝留下来了 ▼


- g2 L- _9 @% ^& U
9 ~7 R% E" R9 P! E就以目前这个表现，这种实时超分辨率的 AI 还是砸不了视频网站的饭碗。
总而言之，目前 RTX 视频超分辨率只在比较窄的场景有明显的提升，并没有两年前 AI 修复视频那种焕然一新的感觉。
要知道，之前的 AI 修复可是能把一个 DVD
（ 720×480 ）分辨率的视频修到 4k 级别的清晰！
瓜瓜Mars，【4K修复】陶喆《Melody》史上最强现场版 ▼

8 I% y* D# X7 `5 n
4 h3 |$ K, @8 l  `& ^/ |3 v- e6 t; H# `
# K- y# A$ u/ J( ~如果在未来，随着 AI 能力和显卡算力的进步，实时生成的超分辨率视频也能接近传统 AI 修复的水平，那它或许真的能带来一些变化。
  Z" X* @- [& j, o  K比如像画质不清晰的老电影或者老电视剧，现在想看高清还需要人工修复，以后直接交给显卡，它实时边修我们边看也不是不可能。
  P+ N- o( ~) g3 o不过现在这效果，还是挺图一乐的，有 30、40 系 N 卡的差友不妨可以试试。

hilalchemist

太炫酷了,满满的科技感