华为发布AI训练集群Atlas 900 投入15亿美元构建开放生态

2019-09-18 13:00:36
来源: 腾讯

  【摘要】 9月18日上午消息,2019华为全联接大会于9月18-20日举行,华为轮值董事长胡厚崑在会上发表题为《共创智能新高度》的演讲。华为在会上首次发布了计算战略,基于架构创新、

9月18日上午消息,2019华为全联接大会于9月18-20日举行,华为轮值董事长胡厚崑在会上发表题为《共创智能新高度》的演讲。华为在会上首次发布了计算战略,基于架构创新、投资全场景处理器族、有所为有所不为的商业策略、构建开放生态进行布局。同时,华为发布了全球最快AI训练集群Atlas 900,加速科学研究与商业创新的智能化进程。

发布计算战略 投入15亿美元构建开放生态

华为此前提出了新的愿景:构建万物互联的智能世界。胡厚崑表示,智能世界的构建有两大关键技术:联接与计算。华为对计算的投入已经超过10年,未来也必须持续投入。

从大型机、PC、手机、可穿戴设备,计算已经成为人类能力的延伸,计算能力的提升成为人类能力提升密不可分的一部分。而计算模式不断演进:从基于规则的计算(CPU),到基于统计的计算(NPU)。

胡厚崑认为,未来基于统计的计算将成为主流,未来五年其算力将占社会算力的80%以上。这意味着计算已经进入智能时代:暴力计算、计算无处不在、端边云协同。而未来十年也将是计算产业的黄金十年,他援引Gartner数据称,预计到2023年,计算产业的市场规模将达2万亿美元。

在会上,华为也首次发布了计算产业战略:

一是架构创新。华为已经自研了达芬奇架构,一方面是摩尔定律走向瓶颈,计算产业需要新的架构;另一方面是华为业务已经覆盖了端边云全场景,本身也需要新的架构;

二是投资全场景处理器族。包括通用计算鲲鹏、智能计算昇腾、终端麒麟和智慧大屏鸿鹄;

三是商业策略有所为有所不为。硬件开放,软件开源,使能应用开发和迁移。华为不对外销售独立的芯片,而是以服务器、板卡的方式开放;

四是构建开放生态。华为四年前发布沃土计划,现在已经帮助了130万开发者。胡厚崑此次发布了新一轮的沃土计划,将投资15亿美元,汇聚500万开发者。

发布全球最快AI训练集群Atlas 900

胡厚崑表示,在通用计算上,华为已经发布了鲲鹏芯片,未来还会在主板、服务器、操作系统、数据库,编译器和工具上持续投入。同时华为也在打造鲲鹏产业生态基地:聚合生态伙伴、开展应用示范、培养产业人才、孵化产业标准。目前已经在北京、上海、深圳、成都等众多城市落地。

在AI计算上,2018年全联接大会上发布的全栈全场景AI解决方案已经全面落地,昇腾芯片覆盖了消费终端、公有云、私有云、边缘计算、IoT行业终端。

在此次大会上,华为还发布了Atlas 900 AI训练集群。胡厚崑介绍,这款产品汇聚了华为几十年的技术积累,是当前全球最快的AI训练集群,由数千颗昇腾处理器组成。可以应用在天文探索、石油勘探等领域。

他表示,在衡量AI计算能力的金标准ResNet-50模型训练中,Atlas 900只用了59.8秒就完成了训练,这比原来的世界记录还快了10秒。“这是什么概念?相当于短跑冠军跑完终点,喝完一瓶水才等到第二名。”

胡厚崑举了一个天文探索的案例,是华为联合上海天文台与SKA共同打造。在一张有20万颗星星的星空图上,当前条件下,天文学家要从这20万颗星星中找出某种特征的星体,需要169天的工作量。现在用上Atlas 900,只用10秒,就从20万颗星星中检索出了相应特征的星体。

目前Atlas 900已经部署到华为云上,将向全球科研机构和大学开放。(张俊)

以下为胡厚崑演讲要点:

两年前,华为发布了新的愿景使命,就是要“把数字世界带入每个人、每个家庭、每个组织,构建万物互联的智能世界”。

我们认为智能世界有三个特征,就是万物感知、万物互联、万物智能,要支撑这样一个智能世界,有两个关键的技术需要持续创新和投资:联接和计算。

智能世界的两大关键技术

大家印象中的华为一直是做联接的,在过去三十多年里,华为在联接领域持续不断地投资,从有线到无线,从2G、3G、4G,到今天热门的5G,华为已经取得了一些成绩。

然而华为并不只是一家做联接的公司。在我们看来,要支撑未来的智能世界,联接和计算缺一不可。事实上,联接和计算这两大技术,就象一对孪生兄弟,相互促进、协同发展。

可以说,在未来的智能世界里,联接到哪里,计算就到哪里,哪里有计算,哪里就有联接。过去我们联接谈得比较多,其实华为对计算的投资已有十年,今天重点向大家分享一下华为在计算方面的洞察与战略。

计算成为人类能力的延伸

首先谈谈我们对计算产业的一些观察。从1946年第一台计算机诞生,70多年以来,从大型机到个人计算机,从台式机到笔记本、到平板电脑,从智能手机到可穿戴设备,计算设备体积越来越小,功能越来越强,离人的距离也越来越近。

可以说,计算能力已经成为人的能力的一种延伸,沿着这样的趋势走下去,我们相信计算产业的发展前景是不可限量的。

计算模式不断演进

过去70年来,计算模式本身也在不断发展。我第一次接触到计算机,是从大学开始的,那个时候学编程,老师教的就是,你给一个公式,它就给你一个结果,事实上这就是一种基于规则的计算模式。这样一种计算模式,当初很好地解决了人口普查、弹道计算等问题。

然而,对于一些无法用确定规则描述的问题,比如说语音识别、图像识别、实时翻译等,基于规则的计算模式要解决这些问题就很吃力。

可喜的是,科学家们找到了一种新的计算模式,就是基于统计的计算模式,能够很好地解决以上提到的这些问题。并且,这种基于统计的计算模式,也成为了当前人工智能发展的关键基石。

我们认为,这种基于统计的计算模式将逐渐成为主流。预计5年后,AI计算所消耗的算力,将会占到全社会算力消耗总量的80%以上,基于这样的变化,我们认为计算正在进入一个新的智能时代。

计算进入智能时代

在计算的智能时代,我们认为有三个重要特征。

第一个特征,需要超强的算力。统计计算本身就是一种暴力计算,高度依赖于算力。举个例子,为了让计算机认识一只猫,就需要数百万图片的训练,这对算力的消耗是非常惊人的,面向自动驾驶、天文探索、气象预测等更复杂场景,对算力的需求将会更大。

第二个特征,计算和智能将会无处不在,而不仅仅是分布在中心侧。从中心节点的暴力计算,到边缘侧的专业计算,如基因测序,以及端侧的个性计算,如耳机、手机,一起构成了未来智能时代的计算形态。

第三个特征,端边云之间需要高效的协同。中心侧负责通用模型的计算,为端侧的个性化计算和边缘侧的专业化计算,提供协同支撑。

2万亿的计算产业大蓝海

要实现这三个特征,我们依然面临很多挑战。比如,超强的算力,探索新的计算架构,面向全场景的处理器等等。

在华为看来,挑战恰恰意味着机会,挑战越大,机会就越大。我们面临的是一个计算产业的大蓝海,这里引用Gartner的数据,预计到2023年,计算产业的规模将超过2万亿美元。

华为计算产业战略

因此,华为坚定不移地投入计算产业,我们主要从四个方面来布局,包括对架构创新的突破、对全场景处理器族的投资,坚持有所为有所不为的商业策略,以及不遗余力地构建开放生态。

架构创新

从我们前面的洞察来看,未来计算无处不在、智能无所不及,这其中算力是关键基础。

而目前产业界算力供给却是稀缺的,算力供给的关键在于处理器的效能,当前摩尔定律已经几乎走到极限的时候,从产业发展角度,我们必须要在处理器架构上寻求突破,要用新的处理器架构来匹配算力的增速。

另一方面,从华为自身的业务布局来看,既有网络业务,也有终端业务,又涉及公有云服务,全面覆盖端、边、云,所以全场景智能,本身就是华为业务智能化的基本需求。

因此,我们推出了达芬奇架构,以实现计算和智能的无处不在,这是华为自然而然的结果。到目前为止,达芬奇计算架构是业界唯一能够覆盖“端、边、云”全场景的处理器架构,这也是华为打造计算产业的坚实基础。

投资全场景处理器族

处理器是整个计算产业最基础的部分,经过多年投资努力,华为已经发布了多个系列的处理器。

具体包括支持通用计算的鲲鹏系列,支持AI的昇腾系列,支持智能终端的麒麟系列,以及支持智慧屏的鸿鹄系列。未来将持续不断地对处理器进行投资,将来还将推出一系列处理器,面向更多的场景。

商业策略

我们的商业策略,用一句话概括就是“有所为有所不为”。总体而言,我们不直接对外销售处理器,以云服务面向客户,以部件为主面向合作伙伴,优先支持合作伙伴发展整机。具体来说,我们有三个方面的考虑:

•硬件开放:我们把服务器主板、AI模组和板卡等硬件开放给伙伴,帮助伙伴做好整机和解决方案。

•软件开源:我们把服务器操作系统、数据库、AI开发框架等软件开源,帮助伙伴做好商用版本,让软件开发更简单。

•使能应用开发和迁移:我们不做应用,但我们提供工具和团队,帮助伙伴更高效地做好应用开发和迁移。

我们希望通过这样一种“有所为有所为不为”的商业策略,来更好地支持我们的伙伴。

构建开放生态

最后,计算产业是个开放的产业,高度依赖于生态,需要全球的协作。

2015年,华为首次发布了沃土计划,在过去的四年以来,我们进展非常顺利,已经发展了130多万开发者和14000多家ISV。

今天,我们将升级沃土计划,继续投入15亿美元,使开发者的规模扩大到500万人,使能全球合作伙伴发展应用及解决方案,在本次大会的第三天,我的同事将会发布详细的计划。

通用计算业务策略

在通用计算领域,我们投资鲲鹏系列,打造有竞争力的通用计算处理器。

在此基础上,我们还在持续不断地对板卡、服务器、操作系统、数据库、编译器等关键技术和产品进行投资,希望通过强力投资,打通生态全链条,让我们的合作伙伴更有信心、更坚定地参与打造鲲鹏产业。

我们也正在联合伙伴们打造鲲鹏产业生态基地。

我们与各地的政府、合作伙伴一起,结合当地的优势,打造鲲鹏计算产业的创新基地和孵化平台。以平台为载体,聚合生态伙伴,开展应用示范,培养产业人才,孵化产业标准。

目前工作开展非常顺利,我们已经在北京、上海、深圳等城市开始实施落地,预计未来将会有更多的合作伙伴,加入我们的行列。

AI计算:全栈全场景AI解决方案全面落地

去年全联接大会上,华为发布了全栈全场景的AI解决方案,坦率地讲,当时我们只交付了用于推理的昇腾310处理器和ModelArts应用开发平台。

今年,我们的用于训练的昇腾处理器和AI计算框架MindSpore都已经发布了。至此,华为的全栈全场景AI解决方案全面落地,大家可以放心地和我们来开展合作。

发布Atlas 900:全球最快的AI训练集群

今天,我们将发布一款重量级的产品——Atlas 900,这款产品汇聚了华为几十年的技术积累,是当前全球最快的AI训练集群,由数千颗昇腾处理器组成。

在衡量AI计算能力的金标准ResNet-50模型训练中,Atlas 900只用了59.8秒就完成了训练,这比原来的世界记录还快了10秒。这是什么概念?相当于短跑冠军跑完终点,喝完一瓶水才等到第二名。

我们相信Atlas 900的强大算力,可广泛应用于科学研究和商业创新。比如天文探索、石油勘探等领域,都需要进行庞大的数据计算和处理,原来可能花费好几个月的工作,现在交给Atlas 900,就是几秒钟的事情。

接下来分享一个天文探索的案例,是华为联合上海天文台与SKA共同打造的,天文研究高度依赖于海量的数据分析和计算,离不开超强的算力支持。

以下是一张南半球的星空图,这张图上有20万颗星星,用人眼是看不见这么多星星的,这些画面来自于SKA射电望远镜的数据。

当前条件下,天文学家要从这20万颗星星中,找出某种特征的星体,相当困难,需要169天的工作量。现在用上Atlas 900,只用10秒,就从20万颗星星中检索出了相应特征的星体。

发布基于昇腾的华为云EI集群服务

为了让大家马上就能用上Atlas 900的超强算力,我们已经把它部署到华为云上,并以极优惠的价格向全球科研机构和大学开放,欢迎大家申请使用。

开拓计算产业大航海新时代

今天,各行各业数字化、智能化转型如火如荼,计算产业蓬勃发展。华为坚定不移地投入计算产业,从最难的架构突破做起,自研处理器,以此为基础打造产业,构建生态。

我们坚信,只有克服最大的困难,才能真正构建起竞争力,才能为行业伙伴打开更大的产业空间,我们要用最好的技术,解决世界上最难的问题,把不可能变成可能。

这是计算产业新的大航海时代,我们期待的是千帆竞发,而不是独舟奋进。我们期望和各行各业的伙伴共同努力,抓住历史机遇,共创智能新高度。