Cerebras推出全天下最强AI超算:具备5400万个AI内核,算力达4 exaFLOPS

作者:百科 来源:休闲 浏览: 【 】 发布时间:2024-10-28 22:40:59 评论数:

阿布扎比科技控股总体 G42 克日宣告推出全天下最快的推出超级合计机 Condor Galaxy-1 (CG-1) ,该合计机具备 5400 万其中间,全天强处置能耐抵达 4 exaFLOPS(IT之家注:每一秒 4 百亿亿次) ,下最可用于磨炼开始进的算具家养智能模子。该合计机位于美国加州圣克拉拉 ,备万由美国家养智能公司 Cerebras 经营 。核算

随着家养智能技术的力达睁开 ,超级合计机的推出需要日益削减  ,良多企业需要借助超级合计机来磨炼自己的全天强模子 ,一些公司如微软建树了高尚的下最根基配置装备部署并将其出租给企业运用的效率 。

总部位于阿布扎比的算具 G42 是一个科技规模的控股总体 ,旨在为未来天下建树根基配置装备部署 ,备万与列国以及企业相助 ,核算实现其愿景。力达该公司正在建树 Condor Galaxy 系列超级合计机零星,推出以辅助处置应古人类面临的最大下场。

良多科技公司已经宣告建树由数千个图形处置单元(GPU)组成的重大集群,这是家养智能模子的大脑 。但 Cerebras 公司的首席实施官 Andrew Feldman 展现 ,“在数千个微型 GPU 上散发繁多模子需要数十名具备罕有业余知识的职员破费数月光阴 。”

Feldman 以及他在 Cerebras 的团队不运用中间超级合计机 ,而是构建了一组互连的 AI 超级合计机,可能大大削减 AI 模子的磨炼光阴。凭证 Cerebras 的措施,建树天生式家养智能模子惟独要多少分钟光阴,而且可能由一总体实现 。

Condor Galaxy 零星的综合处置能耐将抵达 36 exaFLOPS,这在现今的合计天下中是空前的。

每一台超级合计机都是 Condor Galaxy 系列超级合计机的中间 ,其中第一台已经于克日开幕 。Cerebras 公司组装了 64 个其旗舰产物 CS-2 家养智能处置器 ,组成为了 CG-1 超级合计机。

AMD 公司的 EPYC 处置器中间为该零星提供能源,并具备 5400 万个专为家养智能优化的合计中间 ,总体的片上内存容量抵达了 82TB ,各个 CS-2 零星间的带宽速率高达 388Tbps 。

在 16 位合计下 ,该零星可能提供 4 exaFLOPS 的合计能耐,这是当初天下上最快超级合计机速率的四倍 。它可能用于磨炼 6000 亿参数模子 ,并可扩展到反对于 100 万亿参数模子 。作为比力 ,OpenAI 公司的 GPT-4 模子是运用 1.7 万亿参数磨炼的。

Cerebras 以及 G42 还妄想在 2024 年初在美国引入此外两台超级合计机,CG-2 以及 CG-3 ,同时将 CG-1 作为云效率提供给客户 。

CG-1 可能原生地处置 50000 个令牌 ,而无需任何特殊的软件库 。在 CG-1 上编程残缺不需要运用重大的扩散式编程语言 ,节约了在 GPU 上调配使命流的珍贵光阴 。

该超级合计机位于圣克拉拉的一个托管配置装备部署 Colovore,Cerebras 将凭证美公法律经营 ,以确保该合计能耐不会被友好国家所运用  。

G42 以及 Cerebras 信托 ,最快的超级合计机将有助于应答医疗 、能源以及善象变更等挑战 。

最近更新