看高清视频不用开会员，英伟达新技术真有这么厉害？ ...

子非魚_

- S9 h, E" d/ o1 \前段时间，爱奇艺限制高清内容投屏的事情闹得沸沸扬扬。
* O+ n. B) U& A% X7 Q- r8 }" z
& @1 {4 ?/ H; Q. t3 d5 {3 W

最后在高强度的舆论压力下，爱奇艺还是。。。退了一步？
, |' R! T  N# Z9 ~7 d' A: O# k# m. z' F哦，只对老会员退了一步，新会员想要高清投屏，还是要额外花钱的。
- ^( o$ o1 y2 v# [

  F9 H/ j) E. {9 {0 p: p5 p7 K
3 A) n3 W2 D7 n( t& s' B不管爱奇艺这事儿做的有没有谱，但在如今这个万物皆可AI 的时代，视频分辨率不够的问题可能已经不是个事儿了。
# _3 u9 t; A& y8 `2 T就在前几天，英伟达正式实装了一项 AI 视频超分辨率技术，它利用 RTX 显卡的 AI 能力，能把低分辨率（ 小于1440p ）的视频，直接 “ 补像素 ” 显示器的分辨率。


9 n0 H" a" z2 q% D4 Z' u
有差友可能会有疑问，AI 视频修复，这不是一个两年前的火星话题嘛，还能有什么新花样？
" m; W  H" v# U1 A- J( L你别说，还真有。
传统的 AI 视频修复，往往需要远超视频长度的计算时间，才能输出成片，也就是说，它做不到实时的修复。
# y5 ^. Y" U( v. z* Z7 _  C# v# d) s举个例子，up 主“瓜瓜Mars”为了修复一段5 分钟的陶喆演唱会视频，用 1660Ti 跑了三个小时。

" [, q' q7 Q9 q$ J, J; u# D

2 J8 W& t- r# k2 [4 h% A# `而这次，RTX 视频超分辨率可以在播放视频的同时，把 720p 甚至是 480p 的视频，直接超到 4k！
哎呦，想想都觉得香。
* N+ L2 ~1 l2 ^9 ^$ H- P要是老黄的新技术，效果有传统的 AI 修复的八成功力，是不是以后只要不看版权内容，就可以不用为了高清视频开会员了？
传统AI修复前 ▼


4 K2 s, q3 ?/ N, k. s
1 w2 j* b# H; x9 }8 z: s/ X修复后 ▼
" o% ~! S8 p4 ~2 z& S


上手试试呗。
4 j6 p. G( ?/ F3 ]$ `先来介绍一下测试环境。
6 c7 ~/ _' Q! I, U  o, N" m: y这个 RTX 超分辨率一共分成4档，档位越高，对显卡性能要求就更高，效果更好。
由于要至少要 3070 才能开满4档，所以托尼这次就拖了张 3070Ti 看看效果。



" p6 _3 m/ R! r7 T然后又从小黑胖那借了块 4k 显示器，这样就能把最高到 1080p 的视频，直接优化成 4k。
2 P& W1 W7 b( D3 H3 p0 v# x( V8 m
/ j1 `8 a- H5 R& ~  L- [" b
5 w0 w  a: Y. g! S" j
# ?/ j. y8 K) I% e# w& t装完了高配的测试平台，首先来看看在 B 站上超分辨率的效果如何。
/ E4 U, k5 [3 X, Z! G1 n毕竟很多 B 站用户并不是来看付费的版权内容的。对于他们来说，充大会员只是为了看高清视频。
* j. n& a# q6 ]0 e1 W老黄的新技术，能击穿叔叔吗？


- B9 C0 E7 u- z2 [4 k
+ V' u" \) t/ c我们找了个差评硬件部的视频，这个视频的 1080p 画质被 B 站压缩的比较狠，看看老黄的新技术能不能给它救回来。
从不开超分辨率，到开 4 挡质量，最明显的变化，就是人物被自动美白了。
4 ^  m" K3 W3 t5 V$ Y/ t$ ~1080p 分辨率下效果 ▼

: U# O) P5 E' ~

* p' b- v$ [& b% m- w% I, E至于总体画面质量嘛。。。一眼看上去是没有啥的，但要说它开了和没开一样，那也不至于。
8 T+ u! j, y6 @# P# a" p- u细节上，画质的确有提升，边缘明显锐利一些。

8 o* j5 p+ O0 L& b9 C# `1 m* L0 b- O

但真要说它带来了什么整体观感上的变化？



几乎没有吧。。。
分辨率1080p ▼
/ B4 M/ ?! Q" V# N

0 k1 q  S- d) v5 P
而且真要和原生 4k 比起来，那还是差了不止一点。

' ]1 c0 l) d, Y! t0 C  L3 v- s4 H

既然把 1080p 超到 4k 效果不显著，那在原视频是 720p 的情况下呢？
腾讯视频和爱奇艺的免费用户，最高就只能享受 720p 的“准高清”视频，英伟达的这个技术，有没有可能是考虑到这种情况？



先说结论：有效果，但是由于原始视频质量实在太低，在一些场景效果惨不忍睹。
9 B& j/ c- z! Y) v" x0 ~* N* {在几乎静态的景物画面里，能很明显的看出开了超分辨率后画面清爽了很多，甚至压缩造成的色块都消失了。
腾讯视频720p ▼



" G/ U* E, `. Z5 Y3 T比较静态的人物也优化的不错，至少美颜效果有了。
爱奇艺720p ▼
5 j! W$ |# T: b! z

- e- G- E$ ^2 D* s* G# F, e2 r
而到了运动场景，那就完全是翻车现场。
5 R" V8 I- L0 C- GAI 超分辨率最应该解决的问题 —— 视频过度压缩产生的色块，竟然完全没有修复。
这就让视频整体观感变化不大，依然一坨，清晰干净不起来。
3 m: I9 b2 c" y7 ~腾讯视频720p ▼
! N- L! A+ y& R# S- o9 r  G. J, e
- C/ \1 `; d) z' d# \
' L8 T  ]- n3 U0 j9 b: x/ R
而场景中快速运动的人，更是让情况恶化了。
4 Y, Z6 i% _* c. K5 }都说看 AI 先看手，没想到这个用在生成式AI上的定律，在超分辨率 AI 上也有用。
哼哼，露出 AI 脚了吧 ▼


! \2 d0 g: U; o/ O$ _
除了 AI 的传统艺能，它甚至还会往人类脸上 P 一对酒窝。。。
其实是AI伪影，上一帧的衣领被AI当成酒窝留下来了 ▼



" _) s$ w3 V2 V; b- k) L; ]; \' b就以目前这个表现，这种实时超分辨率的 AI 还是砸不了视频网站的饭碗。
总而言之，目前 RTX 视频超分辨率只在比较窄的场景有明显的提升，并没有两年前 AI 修复视频那种焕然一新的感觉。
, h( i  N6 p0 f1 x' q' `要知道，之前的 AI 修复可是能把一个 DVD
（ 720×480 ）分辨率的视频修到 4k 级别的清晰！
瓜瓜Mars，【4K修复】陶喆《Melody》史上最强现场版 ▼



如果在未来，随着 AI 能力和显卡算力的进步，实时生成的超分辨率视频也能接近传统 AI 修复的水平，那它或许真的能带来一些变化。
& F) G) R) G9 D; `( z1 d比如像画质不清晰的老电影或者老电视剧，现在想看高清还需要人工修复，以后直接交给显卡，它实时边修我们边看也不是不可能。
' V" ]( Q# ]5 k4 B7 b8 l不过现在这效果，还是挺图一乐的，有 30、40 系 N 卡的差友不妨可以试试。
2 _- c8 O* x6 V8 v. L

hilalchemist

太炫酷了,满满的科技感