看高清视频不用开会员，英伟达新技术真有这么厉害？ ...

子非魚_

  U. q" S2 R# J- H
0 c" B# s! H7 a- S前段时间，爱奇艺限制高清内容投屏的事情闹得沸沸扬扬。
0 v& x: h/ R" i
; [4 K% `( y+ M% o6 h
9 u3 B8 V0 c+ H
! F+ u6 J2 v- x. A. P% U. ^最后在高强度的舆论压力下，爱奇艺还是。。。退了一步？
7 @, L# `, \3 |8 H6 J哦，只对老会员退了一步，新会员想要高清投屏，还是要额外花钱的。
2 ~6 |$ A+ W! L( @' ^


不管爱奇艺这事儿做的有没有谱，但在如今这个万物皆可AI 的时代，视频分辨率不够的问题可能已经不是个事儿了。
/ l3 q. F/ j, c4 b, Z7 G就在前几天，英伟达正式实装了一项 AI 视频超分辨率技术，它利用 RTX 显卡的 AI 能力，能把低分辨率（ 小于1440p ）的视频，直接 “ 补像素 ” 显示器的分辨率。

, C$ B5 f5 a. l0 A4 P
% y0 ^3 p% T' M, S' Y
有差友可能会有疑问，AI 视频修复，这不是一个两年前的火星话题嘛，还能有什么新花样？
你别说，还真有。
7 G: g; [6 p, M6 }3 [$ S传统的 AI 视频修复，往往需要远超视频长度的计算时间，才能输出成片，也就是说，它做不到实时的修复。
举个例子，up 主“瓜瓜Mars”为了修复一段5 分钟的陶喆演唱会视频，用 1660Ti 跑了三个小时。

/ \& H1 h) ^3 P& l& p, J

而这次，RTX 视频超分辨率可以在播放视频的同时，把 720p 甚至是 480p 的视频，直接超到 4k！
哎呦，想想都觉得香。
要是老黄的新技术，效果有传统的 AI 修复的八成功力，是不是以后只要不看版权内容，就可以不用为了高清视频开会员了？
传统AI修复前 ▼


! b) O9 A; z( j9 s2 k
! B( v. D) W+ B2 R6 @1 d0 |* H; q, ^修复后 ▼

$ H; n) B( q6 `1 h4 x  M0 X

" ^( Y5 P2 d; H上手试试呗。
先来介绍一下测试环境。
这个 RTX 超分辨率一共分成4档，档位越高，对显卡性能要求就更高，效果更好。
由于要至少要 3070 才能开满4档，所以托尼这次就拖了张 3070Ti 看看效果。

0 M8 ^( m7 E, `  ^; @
; X( `& c& d! F+ d9 v
' s' c$ }& D' E9 {; I9 Q- [5 D然后又从小黑胖那借了块 4k 显示器，这样就能把最高到 1080p 的视频，直接优化成 4k。
; p& f' L: p% V! h9 M
! Z$ g- g/ k, H4 x( r: {7 x

' w$ W' a* t: @& |, Q3 X1 j装完了高配的测试平台，首先来看看在 B 站上超分辨率的效果如何。
毕竟很多 B 站用户并不是来看付费的版权内容的。对于他们来说，充大会员只是为了看高清视频。
5 D: l, n1 L; p6 ]& e老黄的新技术，能击穿叔叔吗？
) _) n" j# h, s* m& Y9 m) Q! D
$ C0 J: |" T1 [

$ g( L# d0 Q1 g: ?我们找了个差评硬件部的视频，这个视频的 1080p 画质被 B 站压缩的比较狠，看看老黄的新技术能不能给它救回来。
从不开超分辨率，到开 4 挡质量，最明显的变化，就是人物被自动美白了。
1080p 分辨率下效果 ▼
" e" w9 W, y2 R! U( M
  i; @8 @& D) s2 M0 b) ^7 a

! R$ c8 B9 \4 G8 Q: H+ F( E至于总体画面质量嘛。。。一眼看上去是没有啥的，但要说它开了和没开一样，那也不至于。
* M6 s" W& k5 d4 f2 ~6 j3 F细节上，画质的确有提升，边缘明显锐利一些。
- O) O. l0 _" w! ]


但真要说它带来了什么整体观感上的变化？
  _  L! m$ S& q2 P. R( y3 |5 h+ n8 p4 R
: O5 ^* `; {4 [$ q

4 q5 J* v+ y3 B& v" k2 w, a, _9 ?几乎没有吧。。。
, i. y, i, v6 t7 t. |分辨率1080p ▼
5 z/ s% l5 l5 b5 ~: J8 n

& x- _$ `" M% x' T2 v: T) l; a: J
# U9 Y/ T8 a( h( \* G( a而且真要和原生 4k 比起来，那还是差了不止一点。
7 Q' S& f9 H8 l' R' C$ f! d! y5 f( @

% p- B- A) v0 s2 n! \8 O
- u. H! d! ^& m0 _  ?既然把 1080p 超到 4k 效果不显著，那在原视频是 720p 的情况下呢？
% l: w6 K8 e- c腾讯视频和爱奇艺的免费用户，最高就只能享受 720p 的“准高清”视频，英伟达的这个技术，有没有可能是考虑到这种情况？
2 n% I2 K/ z1 N6 b


8 Q/ G; F% b- b; V# B先说结论：有效果，但是由于原始视频质量实在太低，在一些场景效果惨不忍睹。
! y3 U; u4 M! o. Y2 N" b6 k在几乎静态的景物画面里，能很明显的看出开了超分辨率后画面清爽了很多，甚至压缩造成的色块都消失了。
腾讯视频720p ▼
2 a  l2 A$ I+ S  H! i# ~

/ w- t  G* C' e: C' p5 M1 B& a
% {2 B5 C0 a$ p: [* Q4 l/ f0 U( `比较静态的人物也优化的不错，至少美颜效果有了。
爱奇艺720p ▼
+ F: l+ X; F5 a: ^) v
# U1 Z8 T) _% C1 A# q

而到了运动场景，那就完全是翻车现场。
AI 超分辨率最应该解决的问题 —— 视频过度压缩产生的色块，竟然完全没有修复。
这就让视频整体观感变化不大，依然一坨，清晰干净不起来。
2 L' d8 [- V8 y+ B: ^' U腾讯视频720p ▼
; E: N" z# o) {6 h
' O: J& P" K# c9 G* p6 t5 T/ y" c7 Y

而场景中快速运动的人，更是让情况恶化了。
都说看 AI 先看手，没想到这个用在生成式AI上的定律，在超分辨率 AI 上也有用。
哼哼，露出 AI 脚了吧 ▼



除了 AI 的传统艺能，它甚至还会往人类脸上 P 一对酒窝。。。
其实是AI伪影，上一帧的衣领被AI当成酒窝留下来了 ▼
$ w' E! ]9 Y7 v/ c% x


就以目前这个表现，这种实时超分辨率的 AI 还是砸不了视频网站的饭碗。
( S0 p! X/ T# s; q  [1 [+ g总而言之，目前 RTX 视频超分辨率只在比较窄的场景有明显的提升，并没有两年前 AI 修复视频那种焕然一新的感觉。
" W2 n: j1 K7 h. {. p" |  Y, D要知道，之前的 AI 修复可是能把一个 DVD
/ O/ `" ~) d7 m/ _（ 720×480 ）分辨率的视频修到 4k 级别的清晰！
" k3 l+ M7 S% Q" L瓜瓜Mars，【4K修复】陶喆《Melody》史上最强现场版 ▼



" [: C: k$ Q- r1 H9 [如果在未来，随着 AI 能力和显卡算力的进步，实时生成的超分辨率视频也能接近传统 AI 修复的水平，那它或许真的能带来一些变化。
比如像画质不清晰的老电影或者老电视剧，现在想看高清还需要人工修复，以后直接交给显卡，它实时边修我们边看也不是不可能。
不过现在这效果，还是挺图一乐的，有 30、40 系 N 卡的差友不妨可以试试。
1 y$ n. u; c  ^2 |& [+ P, j7 O

hilalchemist

太炫酷了,满满的科技感