2020NBA总决赛直播：全程精彩回顾

<随心_句子c><随心_句子c><随心_句子c><随心_句子c><随心_句子c>揭(jie)秘(mi)Meta押(ya)註(zhu)人(ren)工(gong)智(zhi)能(neng)新(xin)武(wu)器(qi)：兩(liang)款(kuan)自(zi)研(yan)芯(xin)片(pian)＋超(chao)算(suan)

原(yuan)文(wen)：騰(teng)訊(xun)科(ke)技(ji)

過(guo)去(qu)幾(ji)年(nian)，Facebook母(mu)公(gong)司(si)Meta在(zai)元(yuan)宇(yu)宙(zhou)上(shang)投(tou)入(ru)巨(ju)資(zi)，並(bing)不(bu)斷(duan)致(zhi)力(li)於(yu)相(xiang)關(guan)硬(ying)件(jian)和(he)軟(ruan)件的(de)開(kai)發(fa)，甚(shen)至(zhi)可(ke)能為(wei)此(ci)忽(hu)略(lve)了(le)人工智能領(ling)域(yu)的最(zui)新趨(qu)勢(shi)。但(dan)隨(sui)著(zhu)(zhe)生(sheng)成(cheng)式(shi)人工智能爆(bao)火(huo)，Meta似(si)乎(hu)重(zhong)新調(tiao)整(zheng)了公司方(fang)向(xiang)，开始(shi)在人工智能领域发力。美(mei)國(guo)當(dang)地(di)時(shi)間(jian)周(zhou)四(si)，Meta发布(bu)了两款用(yong)于人工智能的自研芯片，并透(tou)露(lu)了其(qi)在人工智能超算方面(mian)取(qu)得(de)的最新進(jin)展(zhan)。

在周四的虛(xu)擬(ni)活(huo)動(dong)中(zhong)，Meta展示(shi)了其为人工智能工作(zuo)負(fu)載(zai)开发的內(nei)部(bu)基(ji)礎(chu)設(she)施(shi)，包(bao)括(kuo)支(zhi)持(chi)運(yun)行(xing)生成式人工智能，該(gai)公司在新推(tui)出(chu)的廣(guang)告(gao)设計(ji)和創(chuang)作工具(ju)中都(dou)集(ji)成了這(zhe)種(zhong)新技術(shu)。这是(shi)Meta展示實(shi)力的壹(yi)次(ci)嘗(chang)試(shi)。此前(qian)，该公司在采(cai)用對(dui)人工智能友(you)好(hao)的硬件系(xi)統(tong)方面始終(zhong)行动遲(chi)緩(huan)，这削(xue)弱(ruo)了其與(yu)谷(gu)歌(ge)和微(wei)软等(deng)競(jing)爭(zheng)对手(shou)保(bao)持同(tong)步(bu)的能力。

Meta负責(ze)基础设施的副(fu)總(zong)裁(cai)亞(ya)歷(li)克(ke)西(xi)斯(si)·比(bi)約(yue)林(lin)說(shuo)：“建(jian)立(li)我(wo)們(men)自己(ji)的硬件能力，使(shi)我们能夠(gou)控(kong)制(zhi)從(cong)數(shu)據(ju)中心(xin)设计到(dao)培(pei)訓(xun)框(kuang)架(jia)的每(mei)一層(ceng)堆(dui)棧(zhan)。这种水(shui)平(ping)的垂(chui)直(zhi)整合(he)是推动人工智能研究(jiu)向前发展的必(bi)要(yao)條(tiao)件。”

在过去十(shi)年左(zuo)右(you)的时间裏(li)，Meta花(hua)費(fei)了数十億(yi)美元招(zhao)募(mu)頂(ding)級(ji)数据科學(xue)家(jia)，并構(gou)建了新型(xing)人工智能，包括現(xian)在为其應(ying)用和服(fu)務(wu)中的发现引(yin)擎(qing)、審(shen)核(he)过濾(lv)器和广告推薦(jian)提(ti)供(gong)支持的人工智能。但该公司始终難(nan)以(yi)將(jiang)許(xu)多(duo)雄(xiong)心勃(bo)勃的人工智能研究创新轉(zhuan)化(hua)为產(chan)品(pin)，尤(you)其是在生成式人工智能方面。

直到2022年，Meta才(cai)通(tong)过使用CPU和为加(jia)速(su)人工智能算法(fa)而(er)设计的定(ding)制芯片來(lai)运行其人工智能工作负载。但Meta取消(xiao)了原计劃(hua)于2022年大(da)規(gui)模(mo)推出的定制芯片，因(yin)为这需(xu)要对其几個(ge)数据中心进行重大重新设计，它(ta)转而訂(ding)購(gou)了價(jia)值(zhi)数十亿美元的英(ying)偉(wei)達(da)GPU。

AI加速器芯片

为了扭(niu)转局(ju)面，Meta计划开始开发一种更(geng)雄心勃勃的内部芯片，并定于2025年推出。这种芯片能够用于训練(lian)人工智能模型，也(ye)能支持运行它们。

Meta将这款新芯片稱(cheng)为Meta训练和推理(li)加速器，簡(jian)称MTIA，并将其歸(gui)類(lei)为加速人工智能训练和推理工作负载的“芯片家族(zu)”。“推理”指(zhi)的是运行某(mou)个經(jing)过训练的模型。MTIA是一种專(zhuan)用集成電(dian)路(lu)(ASIC），即(ji)将不同电路組(zu)合在一塊(kuai)电路板(ban)上的芯片，允(yun)许被(bei)編(bian)程(cheng)以并行執(zhi)行一个或(huo)多个任(ren)务。

圖(tu)1：为人工智能工作负载定制的人工智能芯片

比约林繼(ji)續(xu)说道(dao)：“为了在我们的重要工作负载中獲(huo)得更好的效(xiao)率(lv)和性(xing)能，我们需要一个与模型、软件堆栈和系统硬件共(gong)同设计的定制解(jie)決(jue)方案(an)。这为我们的用戶(hu)在各(ge)种服务上提供了更好的體(ti)驗(yan)。”

定制人工智能芯片越(yue)来越成为大型科技公司的主(zhu)打(da)产品。谷歌开发了一种處(chu)理器TPU（張(zhang)量(liang)处理單(dan)元），用于训练PaLM-2和Imagen等大型生成式人工智能系统。亚馬(ma)遜(xun)向AWS客(ke)户提供专有(you)芯片，用于培训(Trainium)和推理(Inferentia)。据報(bao)道，微软正(zheng)在与AMD合作开发一款名(ming)为“雅(ya)典(dian)娜(na)”的内部人工智能芯片。

Meta表(biao)示，该公司在2020年开发了第(di)一代(dai)MTIA（MTIA v1），并使用7納(na)米(mi)工藝(yi)生产。它可以从128 MB的内存(cun)擴(kuo)展到128 GB，在Meta设计的基準(zhun)測(ce)试中，Meta聲(sheng)称MTIA能比GPU更有效地处理“低(di)復(fu)雜(za)度(du)”和“中复杂度”的人工智能模型。

Meta表示，在芯片内存和網(wang)絡(luo)领域仍(reng)有很(hen)多工作要做(zuo)，随着人工智能模型规模的增(zeng)長(chang)，这些(xie)领域都還(hai)存在瓶(ping)頸(jing)，需要将工作负载分(fen)散(san)到多个芯片上。令(ling)人覺(jiao)得巧(qiao)合的是，Meta最近(jin)收(shou)购了英国芯片獨(du)角(jiao)獸(shou)Graphcore位(wei)于奧(ao)斯陸(lu)的人工智能网络技术團(tuan)隊(dui)。就(jiu)目(mu)前而言(yan)，MTIA的重點(dian)是針(zhen)对Meta应用系列(lie)的“推荐工作量”上进行嚴(yan)格(ge)的推理，而不是培训。

但Meta強(qiang)调，在运行推荐工作负载时，不断改(gai)进的MTIA“大大”提高(gao)了公司的效率，从而使Meta能够运行“更多增强”和“尖(jian)端(duan)”的人工智能工作负载。

人工智能超级计算機(ji)

也许将来有一天(tian)，Meta會(hui)将其大部分人工智能工作负载交(jiao)給(gei)MTIA负责。但目前，这家社(she)交网络巨頭(tou)依(yi)靠(kao)的是其专注于研究的超级计算机Research SuperCluster。

Research SuperCluster于2022年1月(yue)首(shou)次亮(liang)相，由(you)企(qi)鵝(e)计算、英伟达和Pure Storage合作组裝(zhuang)，目前已(yi)经完(wan)成了第二(er)階(jie)段(duan)的建设。Meta表示，Research SuperCluster现在总共包含(han)2000个英伟达DGX A100系统，配(pei)備(bei)16000个英伟达A100 GPU。

那(na)麽(me)，Meta为什(shen)么要在内部建造(zao)超级计算机呢(ne)？首先(xian)，这里有其他(ta)科技巨头帶(dai)来的壓(ya)力。几年前，微软对其与OpenAI合作开发的人工智能超级计算机进行了大肆(si)宣(xuan)傳(chuan)，最近又(you)表示将与英伟达合作，在Azure雲(yun)上构建新的人工智能超级计算机。同时，谷歌也在吹(chui)捧(peng)自己的人工智能超级计算机，该计算机擁(yong)有26000个英伟达H100 GPU，遠(yuan)远超过Meta的超算。

图2：Meta公司用于人工智能研究的超级计算机

但Meta表示，除(chu)了保持与其他同行同步，Research SuperCluster还允许其研究人員(yuan)使用Meta系统中的现实世(shi)界(jie)示例(li)来训练模型。这与该公司之(zhi)前的人工智能基础设施不同，後(hou)者(zhe)只(zhi)能利(li)用开源(yuan)和公开可用的数据集。

Meta发言人表示：“Research SuperCluster人工智能超级计算机用于推动人工智能研究在几个领域的发展，包括生成式人工智能。这实際(ji)上与人工智能研究的工作效率息(xi)息相关。我们希(xi)望(wang)为人工智能研究人员提供最先进的基础设施，使他们能够开发模型，并为他们提供一个促(cu)进人工智能发展的培训平臺(tai)。”

在其巔(dian)峰(feng)时期(qi)，Research SuperCluster的计算能力可以达到5 exaflop，Meta声称这是世界上最快(kuai)的计算机之一。Meta表示，它使用Research SuperCluster来训练大語(yu)言模型LLaMA。今(jin)年早(zao)些时候(hou)，Meta向研究人员开放(fang)了“封(feng)閉(bi)发布”的大语言模型訪(fang)問(wen)權(quan)限(xian)。Meta说，最大的LLaMA模型在2048个A100 GPU上进行了训练，耗(hao)时21天。

Meta发言人称：“Research SuperCluster将幫(bang)助(zhu)Meta的人工智能研究人员建立新的、更好的人工智能模型，这些模型可以从数萬(wan)亿个例子(zi)中学習(xi)，工作跨(kua)越数百(bai)种不同的语言，無(wu)縫(feng)地分析(xi)文本(ben)、图像(xiang)和視(shi)頻(pin)，以及(ji)开发新的增强现实工具等。”

视频转碼(ma)器

除了MTIA， Meta还在开发另(ling)一种芯片来处理特(te)定类型的计算工作负载。这款芯片被称为Meta可扩展视频处理器，简称MSVP，它是Meta内部开发的第一个专用集成电路(ASIC)解决方案，专为应对视频点播(bo)和流(liu)播的处理需求(qiu)而设计。

有些人可能还記(ji)得，Meta多年前就开始构思(si)定制的服务器端视频芯片，并在2019年宣布了一款用于视频转码和推理工作的ASIC。MSVP就是这些努(nu)力的成果(guo)之一，也是在流播领域重新推动竞争的結(jie)果。

Meta技术主管(guan)哈(ha)里克里希纳·雷(lei)迪(di)和陳(chen)云青(qing)（音(yin)）在他们合著的博(bo)客文章(zhang)中寫(xie)道：“僅(jin)在Facebook上，人们就把(ba)50%的时间花在了觀(guan)看(kan)视频上。我们需要服务于世界各地的各种设备(如(ru)移(yi)动设备、筆(bi)记本电腦(nao)、电视等)，例如上传到Facebook或Instagram的视频被转码成多个比特流，它们具有不同的编码格式、分辨(bian)率和質(zhi)量，MSVP是可编程和可扩展的，可以配置(zhi)为有效地支持VOD所(suo)需的高质量转码，以及直播所需的低延(yan)迟和更快的处理时间。”

图3：Meta的定制芯片旨(zhi)在加速视频工作负载，如流播和转码

Meta表示，该公司的计划是最终将大部分“穩(wen)定而成熟(shu)”的视频处理工作负载转移给MSVP，只对需要特定定制和“顯(xian)著”提高质量的工作负载使用软件视频编码。Meta还称，通过智能去噪(zao)和图像增强等預(yu)处理方法，以及偽(wei)影(ying)去除和超分辨率等后期处理方法，MSVP在提高视频质量方面的工作仍在继续。

雷迪和陈云青称：“将来，MSVP将使我们能够支持更多Meta最重要的用例和需求，包括短(duan)视频，从而实现生成式人工智能、AR/VR和其他虚拟现实内容(rong)的高效交付(fu)。”

人工智能焦(jiao)点

如果说最新硬件公告中有一个共同点的主線(xian)，那就是Meta正在拼(pin)命(ming)加快人工智能的发展步伐(fa)，特別(bie)是在生成式人工智能方面。

今年2月，据称Meta首席(xi)执行官(guan)马克·紮(zha)克伯(bo)格已将提升(sheng)Meta的人工智能计算能力作为首要任务，他宣布成立新的顶级生成式人工智能团队，用他的話(hua)说，这将为公司的研发“渦(wo)輪(lun)增压”。Meta首席技术官安(an)德(de)魯(lu)·博斯沃(wo)思最近也表示，生成式人工智能是他和扎克伯格花费最多时间的领域。据Meta首席科学家楊(yang)立昆(kun)透露，该公司计划部署(shu)生成式人工智能工具，在虚拟现实中创造物(wu)品。

今年4月，扎克伯格在Meta第一季(ji)度財(cai)报电话会議(yi)上表示：“我们正在探(tan)索(suo)WhatsApp和Messenger的聊(liao)天体验，Facebook和Instagram上的帖(tie)子和广告的视觉创作工具，以及随着时间推移的视频和多模式体验。我希望这些工具对每个人都有价值，从普(pu)通人到创作者再(zai)到企業(ye)都是如此。例如，我预计，一旦(dan)我们获得了这种体验，就会有很多人对商(shang)业信(xin)息传遞(di)和客户支持方面的人工智能代理产生興(xing)趣(qu)。随着时间的推移，这也将扩展到我们在虚拟世界的工作中，在那里人们将更容易(yi)创建化身(shen)、对象(xiang)、世界和将所有这些聯(lian)系在一起(qi)的代码。”

在某种程度上，Meta正感(gan)到到越来越大的压力，投资者擔(dan)心该公司的行动不够快，无法在生成式人工智能的巨大潛(qian)在市(shi)場(chang)分一杯(bei)羹(geng)。目前，该公司还沒(mei)有推出可与Bard、必应或ChatGPT等聊天机器人竞争的产品。在图像生成方面也没有取得太(tai)大进展，这是另一个爆炸(zha)式增长的关鍵(jian)领域。

如果这些预测是正確(que)的，生成式人工智能软件的总目標(biao)市场规模可能达到1500亿美元。美国投行高盛(sheng)预测，这将使GDP增长7%。

即使部分预测成真(zhen)，也可以彌(mi)補(bu)Meta在增强现实头盔(kui)、会议软件和Horizon Worlds等元宇宙技术上的数十亿美元投资損(sun)失(shi)。Meta负责增强现实技术的部門(men)Reality Labs上个季度凈(jing)虧(kui)损40亿美元，预计整个2023年的运營(ying)亏损将继续增加。返(fan)回(hui)搜(sou)狐(hu)，查(zha)看更多

责任编輯(ji)：