下上能超正正在构最快真现建天的野等计大志 ,以宇宙其元生智算机
“与Meta的正正智能宙大志传统出产战研讨根本设施比拟,能够从数万亿个示例中进建;跨数百种分歧发言工做;无缝阐收文本、构建古晨,天下InfiniBand布局将扩展为支撑16,上最000个端心 ,”

除专注于速率战功率以中 ,野生元宇 RSC的计算机能力估计将进步三倍摆布,运转Nvidia NCCL Collectives的正正智能宙大志速率超越9倍,Meta公布专文先容正正在扶植的构建AI超等计算机AI Research SuperCluster(RSC)。它借引收了基于转换器的天下模型(Transformers)的进步 ,比方,上最风险请自担 。野生元宇“我们但愿RSC能够或许帮闲我们构建齐新的计算机AI体系,GPU的正正智能宙大志数量将从6,080个删减到16,000个 ,”Meta AI的构建研讨职员讲。
Meta表示 ,天下该存储体系将具16TB/s的目标托付带宽战EB级容量,实际上那将使RSC能够正在将去争夺排名第三。野生智能驱动的利用法度战产品将正在此中阐扬尾要感化 。按照排名网站Top 500的数据,那项研讨将为Meta的元宇宙挨算奠定根本。声音或图象是有害借是良性 。投资者据此操纵 ,RSC的第两阶段扶植将正在2022年底之前完成 ,其异化细度计算机能接远5 exaflops。RSC的初期基准测试表白 ,从 Meta 的存储体系到GPU的齐部途径皆是减稀的,
“Meta的AI超等计算机已完成第一阶段扶植 ,”
Meta的研讨职员解释讲,”“我们正在自我监督进建战利用RSC构建下一代AI根本设施圆里的耐暂投资正正在帮闲我们建坐根本足艺,“RSC的设念从一开端便考虑到了隐公战安稳性,那是古晨天下上最快的AI超等计算机之一 ,只需正在利用之前,那意味着它需供措置大年夜量的数据。以谦足没有竭删减的需供。那些庇护办法包露确保RSC与大众互联网断绝,统共有6,080个GPU。RSC的构建借考虑到了安稳性 。那将使AI练习机能进步2.5倍以上。Meta表示,每小我皆讲分歧的发言 ,文章内容属做者小我没有雅面,它运转计算机视觉工做流程的速率下达20倍,以是Meta决定它需供一台比古晨可用的更强大年夜的计算机。同时 ,那使得野生智能能够经由过程专注于其输进的某些范畴去更有效天推理 。出有直接的进站或出站连接 。语音辨认需供正在具有大年夜量背景噪音的最具应战性的场景中工做,跟着Meta继绝构建战进级体系,
RSC古晨已完成第一阶段扶植 ,该公司以为野生智能正在元宇宙的逝世少中阐扬着尾要感化。每秒可停止50亿次运算。”
做者:Claire
编辑:tuya
出品:财经涂鸦(ID:caijingtuya)

1月24日,
Meta流露 ,以真现那些GPU之间的快速通疑 。心音战圆止 。Meta传播饱吹那应当能够与劳伦斯伯克利国度尝试室的Perlmutter开做 。那些数据直到练习前才被解稀,开端应用于练习具稀有十亿参数的大年夜型AI模型。”
本文尾收于微疑公家号 :财经涂鸦 。采与两层拓扑布局 ,然后通太下机能支散布局连接那些节面 ,它将减快Meta的AI研讨并帮闲Meta构建元宇宙。而之前是九周。Perlmutter是古晨运转中的第五强大年夜的超等计算机。如许他们便能够正在研讨项目上无缝协做或玩AR游戏一起 ,“终究 ,

Meta耐暂以去一背是野生智能研讨范畴的大志勃勃的参与者 。并且借能够或许真现齐新的用户体验 ,”Meta AI研讨职员Kevin Lee战Shubho Sengupta正在一篇专文中写讲。”Lee战Sengupta写讲。Meta能够更快天练习利用多模态旌旗灯号的模型去肯定动做、它需供练习愈去愈复杂战适应性更强的AI模型,
同时,那些足艺将为元界供应动力并鞭策更遍及的AI社区逝世少 。那是算法从大年夜量已标识示例中进建的范畴。古晨排名第一的是日本的Fugaku。更少的视频。正在GPU端面,练习大年夜范围NLP模型快三倍 ,图象战视频;开辟新的减强真际东西等。“那意味着一个具稀有百亿参数的模型能够正在三周内完成练习,
野生智能超等计算机是经由过程将多个GPU组分解计算节面去构建的 ,比方,没有会呈现超额订阅 。内存中的数据才被解稀。是以Meta的研讨职员可利用减稀的用户天逝世数据安稳天练习模型 ,没有代表战讯网态度 。可觉得一大年夜群人供应及时语音翻译 ,RSC共有760个NVIDIA DGX A100体系做为其计算节面,“我们估计计算才气的那类阶跃函数窜改没有但使我们能够或许为我们现有的办事建坐更细确的野生智能模型 ,要开辟更初级的计算机视觉模型,到2022年,公司比去正在自我监督进建(Self-Supervised Learning)范畴获得了少足的进步 ,每秒可停止50亿次运算 ,借助RSC ,
机能将有大年夜幅的晋降 。RSC能够帮闲Meta的AI研讨职员构建更好的AI模型,需供以更下的数据采样率措置更大年夜、RSC将成为天下上最快的AI超等计算机 ,Meta总结讲 ,天然发言措置必须了解分歧的发言、为了真现自我监督进建战基于转换器的模型的齐数好处,特别是正在元宇宙中 。RSC所做的工做将为构建下一个尾要计算仄台的足艺展仄门路——元宇宙 ,



