|
机器之心报道 4 B6 q" \ ~ n: c* l$ x% Z, O
参与:李泽南
7 _, Z1 V) ~5 S; l" K* I9 m# z华为在 HC 大会上发布的「全球最快 AI 训练集群」Atlas 900 引起了人们广泛关注。这仅仅是华为智能计算在全联接大会上新产品发布的开始,华为昨天推出的鲲鹏服务器主板、鲲鹏台式机主板,以及全球最强 AI 训练卡 Atlas 300、AI 训练服务器 Atlas 800 等产品,让我们再次见证了这家公司的研发实力。
9 ]% G5 _( X" z8 }0 h/ W) M+ K1 h0 {
为了促进计算产业的发展和生态建设,华为宣布了服务器操作系统开源计划 (openEuler),将自身在服务器领域的技术积累全部开源。而在硬件方面,华为这次一并发布了 Atlas 800 AI 训练服务器、Atlas 300 AI 训练卡,以及服务器和 PC 主板等设备。今天,华为还宣布推出鲲鹏开发套件。
# p7 s) t& i7 d n( ?3 `
5 h% e: y8 j2 t# R这一系列的产品,旨在践行华为刚刚发布的最新蓝图:9 月 18 日,华为首次发布了面向智能计算产业的系统战略,其中包括架构创新、发展面向全场景的处理器、有所为,有所不为的商业策略、以及构建开放生态的布局。4 V& E4 B% x' B4 }/ o& j
服务器操作系统开源计划 (openEuler)
7 {& `8 k4 z# `9 \' r2 u) g+ B3 [/ n
& M9 U6 {* |5 V4 d) g2 e( i( j7 b& y% N9 Q
华为又开源了一个操作系统:昨天首先推出的是开源服务器操作系统 openEuler,它包含了华为在服务器操作系统领域的大量技术积累。对此,华为 Cloud & AI 产品与服务总裁侯金龙在会上向我们进行了介绍。
0 s8 N& ~1 D- O
P+ t1 p+ `+ h& l1 l
g& G4 ~( H) M! X2 ^0 G " Z8 P2 p% J: E% M- A7 M
华为表示,openEuler 基于此前华为内部使用的服务器操作系统,已有近 10 年的技术积累,并广泛地被应用在华为内部的产品配套中。华为基于对鲲鹏处理器的理解,在性能、可靠性、安全性等方面对操作系统进行了深度优化。优化后时延、性能大幅提升,例如:部分场景多进程并发时延缩短 60 %,Web 服务器性能提升 137% 等。
3 @3 a5 W: `7 e7 E% B1 d
4 d7 y* h5 t; a) ~4 T华为开源服务器操作系统对鲲鹏的优化,筹建 openEuler 开源社区是希望使能合作伙伴发展自有品牌操作系统,促进鲲鹏生态建设。侯金龙还表示,在 openEuler 开源社区,未来还会支持更多架构处理器。
; P9 I- J, k" [% V$ U
- B1 k6 f" ?: l: J3 {2 E4 e2 ~openEuler 内核源于 Linux,为了更好地发挥鲲鹏的性能,华为服务器操作系统在编译系统、虚拟存储系统、CPU 调度、IO 驱动、网络和文件系统等方面做了大量的优化。
/ C/ Y- Y0 u: \) f& c
) ]! F* _+ f9 I# v6 \7 I5 IopenEuler 将是一款开源的操作系统。华为表示,openEuler 将会成为一种由全球开源贡献者构建的高效、稳定、安全的开源操作系统,广泛应用于数据库、大数据、云计算、人工智能等场景。
1 _( n1 f+ q* J0 N' T! M& S% a6 k8 |
鲲鹏主板:发展硬件架构生态, f9 G( S# e/ S v. d5 ~
0 D% N+ H& T7 {除了开源的操作系统,华为还有开放的硬件。在大会上,华为首次开放了鲲鹏系列主板,其中包括服务器主板和台式机(PC)主板,它们已经向合作伙伴全面开放。
( a# _& i5 Y! `' Y
- O8 B, h& [8 J! ~* m F2 ?/ O鲲鹏主板搭载两颗鲲鹏处理器,其中包括 128 个物理核心。另外,这块主板上包含 32 个内存插槽,内置 100GE RoCE,支持目前最快的 PCIe 4.0 接口。华为的合作伙伴可基于鲲鹏主板和整机参考设计,快速开发出自有品牌的服务器和台式机产品。
4 Q$ z: r' T9 l: P) c「鲲鹏处理器是业界首个推出内置直出 100GE 网络能力的通用处理器,我们希望在未来能够让 100GE 成为服务器的标准配置。」华为智能计算业务部总裁马海旭表示。
) E1 k1 M: Z+ e4 {1 J
$ `% C! ?3 z1 N5 O# _在 HC 2019 大会上,华为智能计算业务部总裁马海旭宣布了鲲鹏主板全面开放。 , o: ^; N3 Q# J& i0 |8 Q6 p5 f
$ l" E6 Z& r" u$ r7 V- x$ d鲲鹏主板的开放主要是为了推动鲲鹏计算产业生态。「鲲鹏主板搭载了计算产业所有同事们的梦想,」马海旭表示。「华为将鲲鹏主板全面开放,优先支持合作伙伴基于鲲鹏主板开发更多的最强算力产品,这会给客户带来更多、更好的选择。」7 N. V4 I9 x; h: n9 b1 m
2 E5 \/ b3 n% W2 T e3 f' \# K
华为认为,经由自身 30 多年的研发,与各类硬件主板累计超过 10 亿块的制造经验,鲲鹏主板可以 100% 地释放整机算力。, b& b$ q: h7 G- H8 I; k* ^9 X
1 M# `5 B0 ^/ D
鲲鹏主板具备业界领先的 56G 高速 SerDes 能力,其信号误码率低于 10 的负 12 次方,故障率相较业界平均水平低 15%。另一方面,通过华为创新的 DEMT 动态节能技术,鲲鹏可以实现能效比领先业界 15% 以上。
+ p0 V- w, c3 ~3 ^1 l5 {7 ~* e3 j# _6 J1 s" a% @
$ l# X7 Z, m% G' `1 P: A
2 ? h: s% `/ [4 W4 q5 t这一次,华为为鲲鹏主板内置了 BMC 芯片和 BIOS 软件,还将开放主板接口规范和设备管理规范。为了提升整理设计效率和质量,华为还会提供机箱,供电,散热,背板等参考设计。
4 C$ Y) g! ]( j5 E$ o/ k8 n
4 O& n9 ] w, M9 {在发布会上,清华同方也宣布推出了基于鲲鹏主板的 PC 台式机。6 k9 i }3 n! ~7 `9 L
首次发布鲲鹏开发套件8 F1 ?7 d) d, I s1 Z7 U3 h# g
为了支持开发者在鲲鹏计算平台上高效地进行软件开发和迁移,今天华为还发布了鲲鹏开发套件,其中包含编译器、工具等四个组件,为开发者提供云上软件开发平台。
w" C4 H. r% `& R, p1 L- \& x
! ?3 s$ D0 \! |5 [
- q! Y p9 ?; _. t" f% W- P华为智能计算 TaiShan & Atlas 领域总经理张熙伟表示:「鲲鹏生态发展进入快车道,在过去的 9 个月内,华为携手合作伙伴共同完成了超过 3000 个行业应用向鲲鹏生态的迁移。鲲鹏使能开发者,为每行代码注入改变世界的算力」。
% A+ o3 p/ u7 e( j" r# ^# F* S9 r6 |/ E9 O4 c0 b$ K9 \' q
华为表示,鲲鹏将持续提供先进算力支持,其具有四大优势:' W& w) A$ C( j8 ^' j* `
3 V# E* d# D" d9 i
+ E, ~% [5 f! E! P& ^+ A/ h- 「端边云算力同构」优势,打破数据中心与边缘、终端的界限,为开发者提供统一架构的计算平台。
2 e5 a* @2 _6 W, E3 ]+ u. j - 多核高并发的计算优势,满足大数据、分布式存储、数据库等场景的算力需求,引领 IT 架构分布式转型趋势。( [7 t+ p6 i$ P: a( z! P
- 通过鲲鹏+昇腾的协同优势,灵活向 AI 算力扩展,满足 5G、AI、自动驾驶等新技术对多样性算力需求。
* c' j% P2 {0 d. R! Y - 鲲鹏五级算力加速技术,通过迭代编译、NUMA-aware、消息队列硬加速、函数加速库、内核调度自优化,实现程序性能提升 50%。
1 T" q) ~" D8 d8 k! g# o ! d' v" ^* a9 D7 f2 `. r0 j% @3 n
% O6 r4 s5 d: {本次大会发布的华为鲲鹏开发套件包含编译器和三个工具。业界首创的分析扫描工具和代码移植工具实现跨计算平台的自动化应用迁移,让开发者对指令集差异无感,加速应用迁移的同时实现代码优化;性能优化工具面向开发者性能调优实战设计,通过性能可视和一键式优化,帮助开发者工作效率提升 5 倍。1 B c- I& U3 S$ n9 k2 ^, t/ F+ y
现在,开发者能够在鲲鹏开发者社区一站式获取相关工具和知识库,同时华为云 DevCloud 云上软件开发平台也集成了鲲鹏开发套件,为开发者提供线上全流程软件研发工具。6 x. P' l) z( z- \9 n! w3 i
基于昇腾 AI 芯片的 Atlas 算力
9 m6 k4 F. ~1 D2 u+ ]: }; t. D3 u' D9 a" K6 f/ e
昨天,华为还发布了两款基于昇腾 910 AI 芯片的 Atlas 新产品:全球算力最强的 AI 训练加速卡 Atlas 300,和训练服务器 Atlas 800。3 [, K, m. s# I5 h7 D7 H, m
& A9 N W: H# w9 G- e- t# V7 c, K3 j, j: T! i6 @; {9 x! g$ s7 S6 i( r
3 O( t M" o3 i6 r* }
+ }; i( ^: |* y( c从芯片、服务器到集群,华为两天来推出的新产品重新定义了智能世界的 AI 最强算力,它们也完成了 Atlas 全系列的训练和推理产品布局,可实现云边端全场景部署,加速全行业智能化。: B/ H8 L/ G! d- W) N$ _$ o
) n$ J4 D; Q9 K8 h! l; |( K
最强 AI 训练卡 Atlas 300/ n$ u3 ], }9 i* _. y' G1 O5 N- N& @9 x+ }
首先是一款为 AI 训练任务准备的加速卡。Atlas 300 训练卡可以实现 256 TFLOPS(FP16)的算力,是当前业界主流训练卡的两倍,强大的算力可令深度学习算法在训练时每秒处理的图片数据量从 965 张提升到 1802 张。
, Q+ @# c" Y! l! D5 i; a" x9 q, E- {( U, C7 T+ e
这款训练卡为双槽位设计,采用 PCIE 接口,可广泛支持目前已有的常规服务器设备。: M/ {; F) F! E' X' n# v1 D
0 W4 k$ l2 ~5 v& P
3 Y4 V+ ]$ v' ?! M( g. Q8 S6 }4 n8 r" q
|1 K4 G7 v& Z8 M# b( B
除了算力强大之外,Atlas 300 训练卡还支持 100GE RoGE 直出高速接口,可实现梯度参数和数据集并行传输,最高可以降低 70% 的梯度同步时延,可将集群训练时间缩短到秒级。0 P4 r4 |. Z! ^7 b9 [7 U4 j, K
# w0 R, `$ R+ U$ t" E. u
Atlas 800:业界最强 AI 服务器/ w- `5 c/ F L9 i
8 Z( l' S' q# l: EAI 训练服务器 Atlas 800 则是一种更为专用化的设备,其在 4U 的空间里集成了 8 块昇腾 910 AI 芯片,可以提供 2P FLOPS 的算力,其密度是业界同类产品的 2.5 倍。 8 N" w$ }2 E9 Q* X" H' J
相比于很多公司已经推出的 AI 推理芯片,训练芯片的能力更能体现 AI 的最强算力。华为在今年 8 月推出的昇腾 910 训练芯片基于达芬奇架构,内置了 32 个 3D Cube 计算引擎,单引擎能够在一个时钟周期内完成 4096 次乘加运算。算力高达 256T FLOPS。1 ?4 u6 U2 s; | ?6 ~+ P
" ^ B, t! W# m0 W, [' h「Atlas 800 的重量为 75 公斤,不到业界同类产品的一半,」马海旭介绍道。「它内置 32 个硬件解码器,每秒可以完成一万六千张 1080p 图片的解码,是业界主流产品处理能力的 25 倍,而且这些工作负载可以和训练并行,同时处理。」 Z9 |# A% i1 B, N3 Z' `* z
9 [$ X5 ~2 W# [
为了实现更高的算力,Atlas 服务器支持风冷和液冷两种散热方式。目前在华为的松山湖数据中心里,这家公司已经部署了全液冷版本的 Atlas 800。
1 V7 l4 T; F' u* {9 v$ u1 p/ c3 p5 G( X# w1 B+ v
实际上,华为在周三推出的 Atlas 900 AI 训练集群就是由 Altlas 800 AI 训练服务器组成的。华为表示,此 AI 集群内含超过 128 台 Atlas 800 服务器,用户可根据需求部署不同的数量。) Q0 z: W9 B3 e4 z
& a% y/ b4 w3 [9 r通过高效率的整合,AI 训练集群 Atlas 900 成为了目前全球计算机的巅峰,其总算力达到 256P~1024P FLOPS @FP16,相当于 50 万台 PC 的计算能力。8 A# y) A/ I' k3 ^5 Z N& \
开放生态,让智能无所不及
, P" ~7 z& E3 l% S+ @, ^3 R
6 \" C6 @; w' W( z+ j0 ~8 u芯片和操作系统,一直是国内科技公司不擅长的领域。华为通过近年来的不断投入,正一步步让自身产业链延伸到核心技术区域。
. J Y/ K! J: o, T/ a% O$ Q/ Y9 c% ^; I4 O# w
2 F* h2 C' q8 p+ {
华为副董事长胡厚崑表示,未来五年内基于统计的计算将成为主流,其算力将占社会算力的 80% 以上,智能计算产业将会出现万亿美元级蓝海市场。在着力研发最强算力产品之外,邀请更多合作伙伴加入智能计算产业,构建繁荣的生态是发展的重要举措。
9 I! D' O( ]) }4 x. c/ f
7 }7 F: Y2 k ?! b. m. l) L4 C
) B$ k8 G: j8 M5 P0 |2 R. k# G7 \ K
华为希望通过硬件开放和软件开源,使能广大合作伙伴,从而形成开放繁荣的生态,帮助所有人都可以打造出最强算力产品。
+ ]7 u' c3 }6 }; B3 W+ }0 }* j! h1 j! ^$ Q2 [1 J- B# S9 c
; ]+ H0 J& c5 F架构只是基础,华为还将继续打造基于鲲鹏处理器的硬实力,同时发展面向合作伙伴开放的软实力。未来,华为还将与合作伙伴们共同努力,加速商业创新与科学研究的智能化进程。, F- C9 W- B+ Q1 k% D
; \- T7 L2 b3 B本文为机器之心报道,转载请联系本公众号获得授权。- [% t0 b! C% N7 z8 Y! J
✄------------------------------------------------加入机器之心(全职记者 / 实习生):hr@jiqizhixin.com投稿或寻求报道:content@jiqizhixin.com广告 & 商务合作:bd@jiqizhixin.com" e) `1 n! n7 v* E2 r2 I
来源:http://mp.weixin.qq.com/s?src=11×tamp=1568993405&ver=1864&signature=lbIoeEvYddxEHI4sKRWrIngG0mxTDoOFbEc6xVw0*UP649Sop-OPosYIoerseuHSuorJgkGllvH9vLUUKxTZ*VP9WKbeBhFI8*3kCJPr8cNA9aUSJRqbJ0v1WAVMmV1y&new=1
/ a, @- R% r K; f免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作! |
本帖子中包含更多资源
您需要 登录 才可以下载或查看,没有账号?立即注册
×
|