看高清视频不用开会员，英伟达新技术真有这么厉害？ ...

子非魚_

1 o% O4 b$ h9 [6 N3 x, ^( {
4 y/ z9 |" U3 l3 U前段时间，爱奇艺限制高清内容投屏的事情闹得沸沸扬扬。



# V: N8 o7 r: b+ x+ E4 p最后在高强度的舆论压力下，爱奇艺还是。。。退了一步？
! U8 J& V* M5 w哦，只对老会员退了一步，新会员想要高清投屏，还是要额外花钱的。


, U4 R& \# {" `) Q# H/ f
  g3 N, A. m- ]* M6 p) W6 [不管爱奇艺这事儿做的有没有谱，但在如今这个万物皆可AI 的时代，视频分辨率不够的问题可能已经不是个事儿了。
就在前几天，英伟达正式实装了一项 AI 视频超分辨率技术，它利用 RTX 显卡的 AI 能力，能把低分辨率（ 小于1440p ）的视频，直接 “ 补像素 ” 显示器的分辨率。
; Q1 m$ ?. B5 w5 ^7 }

, M+ X9 ~) s& [8 J
有差友可能会有疑问，AI 视频修复，这不是一个两年前的火星话题嘛，还能有什么新花样？
你别说，还真有。
传统的 AI 视频修复，往往需要远超视频长度的计算时间，才能输出成片，也就是说，它做不到实时的修复。
- K) _2 t/ w( O% V举个例子，up 主“瓜瓜Mars”为了修复一段5 分钟的陶喆演唱会视频，用 1660Ti 跑了三个小时。
3 K. W3 `1 d7 ~6 ]
% @- ?- {% j: D: w& L! R

' [% U6 Z: t& x/ j而这次，RTX 视频超分辨率可以在播放视频的同时，把 720p 甚至是 480p 的视频，直接超到 4k！
  V& h! l: D5 ]0 B/ i4 t3 f哎呦，想想都觉得香。
要是老黄的新技术，效果有传统的 AI 修复的八成功力，是不是以后只要不看版权内容，就可以不用为了高清视频开会员了？
传统AI修复前 ▼

. w7 ], e% z- ]
8 z, D% S4 N! @, D2 f" P; j0 C
1 R( O$ ~$ W/ H( o修复后 ▼

9 I: H7 l' z* C6 {

上手试试呗。
先来介绍一下测试环境。
这个 RTX 超分辨率一共分成4档，档位越高，对显卡性能要求就更高，效果更好。
由于要至少要 3070 才能开满4档，所以托尼这次就拖了张 3070Ti 看看效果。
$ F6 z0 v% T5 W; v' l$ Q
! j0 N. ~6 F" W9 S( d# d6 N, R
$ c! J, k% B8 X0 z3 I! E, T
然后又从小黑胖那借了块 4k 显示器，这样就能把最高到 1080p 的视频，直接优化成 4k。


; i# T# h$ x9 B5 E4 ]( B
; A: [  l" s3 F. T装完了高配的测试平台，首先来看看在 B 站上超分辨率的效果如何。
: Q( D8 B9 ^' E" L5 {毕竟很多 B 站用户并不是来看付费的版权内容的。对于他们来说，充大会员只是为了看高清视频。
老黄的新技术，能击穿叔叔吗？

) |+ |1 T' P' X# ~& ~: S7 b$ K

% S; D' P3 T* j0 X我们找了个差评硬件部的视频，这个视频的 1080p 画质被 B 站压缩的比较狠，看看老黄的新技术能不能给它救回来。
从不开超分辨率，到开 4 挡质量，最明显的变化，就是人物被自动美白了。
1080p 分辨率下效果 ▼

: X& \0 k. P$ i5 }# A
" }) ~  i& V: V* F
8 K( P5 c+ s/ e/ m" t至于总体画面质量嘛。。。一眼看上去是没有啥的，但要说它开了和没开一样，那也不至于。
$ A, a( k" M' q$ J; U细节上，画质的确有提升，边缘明显锐利一些。
9 r. i) ~+ w9 T4 S( c" R! U4 {
# q1 B6 ?" n6 ^

9 _6 b9 n1 `; m* {& s但真要说它带来了什么整体观感上的变化？


0 q: K  @! R; X" A) T! ^( e4 k
: e1 c# U' g# t3 @+ z0 ?几乎没有吧。。。
, \0 H2 e0 q0 W6 ]$ v  R- D分辨率1080p ▼



而且真要和原生 4k 比起来，那还是差了不止一点。
* Z$ _, I" f) o, V


既然把 1080p 超到 4k 效果不显著，那在原视频是 720p 的情况下呢？
# {! e: _$ l$ f6 X+ c' f) p3 P腾讯视频和爱奇艺的免费用户，最高就只能享受 720p 的“准高清”视频，英伟达的这个技术，有没有可能是考虑到这种情况？

" F" P6 q/ H$ v

5 {- m( _" V2 e- c4 l/ p先说结论：有效果，但是由于原始视频质量实在太低，在一些场景效果惨不忍睹。
: D! {/ a+ _6 z* u在几乎静态的景物画面里，能很明显的看出开了超分辨率后画面清爽了很多，甚至压缩造成的色块都消失了。
( i5 D& v# Z; U/ z; J; W0 [腾讯视频720p ▼
" L. w& G5 {3 W' y- I

4 k0 C) |, a' @1 ?0 d& e
比较静态的人物也优化的不错，至少美颜效果有了。
爱奇艺720p ▼

+ p) F! k' q2 U
8 u2 p% F4 q9 |
而到了运动场景，那就完全是翻车现场。
AI 超分辨率最应该解决的问题 —— 视频过度压缩产生的色块，竟然完全没有修复。
+ x: s- F6 d# l6 r3 a* I6 n) A; \这就让视频整体观感变化不大，依然一坨，清晰干净不起来。
2 Q8 ~$ k# n2 h+ }# I. U腾讯视频720p ▼
/ T( O) C# E4 I$ [8 ^% f
4 r/ \4 Z' }$ O9 O7 @5 h; F) W
) J" v; D- e  [, |3 K8 C" O
  F1 t4 I3 V3 v( W) p而场景中快速运动的人，更是让情况恶化了。
1 Z: d# y: q+ R! ^* B/ S, F都说看 AI 先看手，没想到这个用在生成式AI上的定律，在超分辨率 AI 上也有用。
哼哼，露出 AI 脚了吧 ▼
, W! L& `8 {2 S; f. @, O

: r  a! C( e3 M5 B* X+ T8 I4 ]9 S; @
& O& d. p9 b. s除了 AI 的传统艺能，它甚至还会往人类脸上 P 一对酒窝。。。
其实是AI伪影，上一帧的衣领被AI当成酒窝留下来了 ▼


" P$ C! m) G; L. N4 V
4 `! r; R9 T, t5 _% W! D' j) Q3 `就以目前这个表现，这种实时超分辨率的 AI 还是砸不了视频网站的饭碗。
总而言之，目前 RTX 视频超分辨率只在比较窄的场景有明显的提升，并没有两年前 AI 修复视频那种焕然一新的感觉。
; [" ?: c  K5 C  b- s要知道，之前的 AI 修复可是能把一个 DVD
+ F9 @6 R8 l& G' p) J（ 720×480 ）分辨率的视频修到 4k 级别的清晰！
" N7 Y" U8 S/ R) h" w9 m8 _瓜瓜Mars，【4K修复】陶喆《Melody》史上最强现场版 ▼

  a* o8 _. H# |- _# B( T8 P
: x4 B% D& J: q0 A7 z& o( O
如果在未来，随着 AI 能力和显卡算力的进步，实时生成的超分辨率视频也能接近传统 AI 修复的水平，那它或许真的能带来一些变化。
9 a0 I/ ~; S& [) e: Q比如像画质不清晰的老电影或者老电视剧，现在想看高清还需要人工修复，以后直接交给显卡，它实时边修我们边看也不是不可能。
5 s: J7 L# Y/ R不过现在这效果，还是挺图一乐的，有 30、40 系 N 卡的差友不妨可以试试。
8 A  W  W1 {- h1 \" I# e' O

hilalchemist

太炫酷了,满满的科技感