• 首页 > 产经新闻频道 > 科技资讯

    Cerebras推出"世界最快"AI推理服务,挑战Nvidia主导地位

    2024年08月28日 14:33:39 来源:AIbase基地

      人工智能计算初创公司Cerebras Systems Inc.正式推出其号称"世界上最快的人工智能推理服务",这一举措无疑是对行业巨头Nvidia Corp.的直接挑战。Cerebras首席执行官安德鲁·费尔德曼表示,新服务旨在以更快的速度和更低的成本完成AI推理任务,回应了市场对高效推理解决方案日益增长的需求。

      Cerebras的"高速推理"服务建立在其强大的WSE-3处理器之上。这款处理器拥有超过900,000个计算核心和44GB板载内存,其核心数量是单个Nvidia ***图形处理单元的52倍。Cerebras声称,其推理服务速度可达每秒1,000个令牌,比使用Nvidia最强大GPU的同类云服务快20倍。更引人注目的是,该服务的起价仅为每百万个代币10美分,据称比现有AI推理工作负载的性价比高100倍。

      Cerebras推理服务提供三个访问层级,包括免费服务、开发者层和企业级。开发者层通过API端点访问,为Llama3.18B模型提供每百万代币10美分的价格,而Llama3.170B模型则为60美分。企业级则提供更多定制选项和专门支持,适合持续性工作负载。

      多家知名机构已成为Cerebras的早期客户,包括葛兰素史克公司、Perplexity AI Inc.和Meter Inc.等。DeepLearning AI Inc.的创始人Andrew Ng博士对Cerebras的快速推理能力给予高度评价,认为其对于需要反复提示大语言模型的代理AI工作流程特别有帮助。

      除了推理服务,Cerebras还宣布了多项战略合作伙伴关系,旨在为客户提供全方位的AI开发工具。合作伙伴包括LangChain、LlamaIndex、Docker Inc.、Weights & Biases Inc.和AgentOps Inc.等。此外,Cerebras的推理API与OpenAI的聊天完成API完全兼容,这意味着现有应用程序可以轻松迁移到其平台。

      文章内容仅供阅读,不构成投资建议,请谨慎对待。投资者据此操作,风险自担。

    海报生成中...

    最新新闻

    热门新闻

    即时

    全球顶级AI创作社区回归!海艺AI国内首发“全民娱乐化创作

    海艺AI的模型系统在国际市场上广受好评,目前站内累计模型数超过80万个,涵盖写实、二次元、插画、设计、摄影、风格化图像等多类型应用场景,基本覆盖所有主流创作风格。

    新闻

    市场占比高达35.8%,阿里云引领中国AI云增长

    9月9日,国际权威市场调研机构英富曼(Omdia)发布了《中国AI云市场,1H25》报告。中国AI云市场阿里云占比8%位列第一。

    企业IT

    “三位一体”数据保护体系,筑牢企业出海安全“生命

    戴尔科技一直致力于通过“三位一体”数据保护体系,为中国企业的数据安全“保驾护航”。

    3C消费

    雅马哈推出两款高端头戴耳机YH-4000与YH-C3000

    雅马哈昨日宣布推出两款头戴式耳机,分别是平板振膜的YH-4000和动圈原理的YH-C3000。

    研究

    IDC:2025上半年全球智能家居清洁机器人出货量同比暴

    IDC今日发布的《全球智能家居清洁机器人设备市场季度跟踪报告,2025年第二季度》显示,上半年全球智能家居清洁机器人市场出货1,2万台,同比增长33%,显示出品类强劲的市场需求。