美国芯片设计初创公司Cerebras Systems宣布推出晶圆级Wafer Scale Engine 3 (WSE-3) 芯片,该芯片采用台积电5nm工艺。与其前一代WSE-2相比,WSE-3的晶体管数量增加54%,达到4万亿个晶体管。配备WSE-3的CS-3系统在功耗相同的情况下,性能是CS-2的两倍。Cerebras公司CEO Andrew Feldman认为,这是朝着实现摩尔定律迈出的真正一步。
WSE-3 AI芯片几乎由一整块12英寸晶圆制成,形成边长为21.5厘米的正方形。其配置90万个AI核心,提供高达每秒125 peta浮点运算(PFLOPS)的AI计算性能,理论上相当于约62个英伟达H100 GPU。
Cerebras的WSE系列目前包括三代芯片,分别于2019年、2021年和2024年初推出,并采用台积电16nm、7nm和5nm工艺节点。这三代晶体管的数量分别达到1.2万亿个、2.6万亿个、4万亿个。这些产品的演进趋势显示晶体管数量增加三倍以上,其中FLOPS计算性能的提升最为明显。AI核心数量、内置内存容量和内部带宽的变化保持相对稳定。
配备单个WSE-3芯片的CS-3计算系统可用于训练多达24万亿个参数的神经网络模型。这相当于最强大的LLM规模的十倍,包括OpenAI的GPT-4和谷歌的Gemini。CS-3系统还具有出色的可扩展性,支持连接多达2048台设备。如此规模的计算集群意味着700亿参数的Llama模型的训练可以在一天内完成。
CS-3计算系统的推出引起市场的高度关注。Cerebras收到了来自企业客户、云服务提供商和政府机构等的大量订单。此外,继Condor Galaxy 1(CG-1)和CG-2之后,Cerebras和阿联酋G42公司已开始构建CG-3超级计算机。CG-3位于美国得克萨斯州达拉斯市,将配备64个CS-3计算系统,总计5760万个AI核心,预计AI计算性能为8 exaFLOPS(EFLOPS)。
结合加州的CG-1和CG-2系统,Condor Galaxy计算网络的总性能将达到16 EFLOPS,该庞大的分布式计算网络预计将于2024年底完工,最终包括CG-1至CG-9的9台超级计算机。它将用于G42的内部团队和云服务。G42公司CTO Kiril Evtimov透露,现有的Condor Galaxy计算网络已经用于训练一些业界最先进的开源模型。
文章内容仅供阅读,不构成投资建议,请谨慎对待。投资者据此操作,风险自担。
5 月 10 日消息,据中兴通讯官微,中兴二合一 5G 云电脑“逍遥”系列已经在电商平台上架。其支持本地、云端双模式,可在电脑与平板模式之间一键切换。售价方面,型号为 W200DS 的产品首销价格为 1899 元。
近日,中国家电及消费电子博览会(AWE 2024)隆重开幕。全球领先的智能终端企业TCL实业携多款创新技术和新品亮相,以敢为精神勇闯技术无人区,斩获四项AWE 2024艾普兰大奖。
“以前都要去窗口办,一套流程下来都要半个月了,现在方便多了!”打开“重庆公积金”微信小程序,按照提示流程提交相关材料,仅几秒钟,重庆市民曾某的账户就打进了21600元。
由世界人工智能大会组委会、上海市经信委、徐汇区政府、临港新片区管委会共同指导,由上海市人工智能行业协会联合上海人工智能实验室、上海临港经济发展(集团)有限公司、开放原子开源基金会主办的“2024全球开发者先锋大会”,将于2024年3月23日至24日举办。