Arm 公司昨日(7 月 10 日)发布博文,为了满足未来生成式 AI 的需求,扩展提供更多先进智能功能,推出了可以加速 AI 工作负载的可扩展矩阵扩展 2(SME2)技术,开发者无需修改代码,即可集成至现有模型和应用中。
该公司指出,在移动设备上的生成式 AI 应用不再局限于传统的聊天机器人和虚拟助手,而是逐渐发展到生成文本、声音、图像和视频,执行数学推理、以及群聊摘要等诸多高级智能功能。
SME 最初出现在 Armv9 架构中,是一组可选的高级 CPU 架构扩展,专门设计用于加速矩阵数学运算。
SME2 在 2022 年底首次亮相,在此基础上增加了新功能,据 Arm 称,它能够实现实时的移动端推理任务,涵盖生成图片、自然语言处理任务等。
Arm 还分享了一些数据,这些数据确实让 SME2 看起来非常可靠。根据 Arm 的说法,Google 的 Gemma 3 模型在 SME2 增强的硬件上,比没有 SME2 的硬件快 6 倍。
它可以在单个 CPU 核心上不到一秒钟内运行 800 字的文本摘要,IT之家注:这里 Arm 所指的 CPU 型号尚不清楚。
对于消费者来说,公告中的关键部分是,未来安卓手机即将具备 SME2 硬件能力。
到目前为止,SME 主要保留给服务器和工作站级处理器,因为其要求较高。然而,SME2 被设计为更加可扩展,能够部署在笔记本电脑、平板电脑,以及高端智能手机上。
重要的是,安卓已经准备好支持 SME2。SME2 在 Google 的 XNNPACK 库中启用,并支持 llama.cpp、阿里巴巴的 MNN 和微软的 ONNX 等框架。
文章内容仅供阅读,不构成投资建议,请谨慎对待。投资者据此操作,风险自担。
海报生成中...
海艺AI的模型系统在国际市场上广受好评,目前站内累计模型数超过80万个,涵盖写实、二次元、插画、设计、摄影、风格化图像等多类型应用场景,基本覆盖所有主流创作风格。
奥维云网(AVC)推总数据显示,2024年1-9月明火炊具线上零售额94.2亿元,同比增加3.1%,其中抖音渠道表现优异,同比有14%的涨幅,传统电商略有下滑,同比降低2.3%。
“以前都要去窗口办,一套流程下来都要半个月了,现在方便多了!”打开“重庆公积金”微信小程序,按照提示流程提交相关材料,仅几秒钟,重庆市民曾某的账户就打进了21600元。
华硕ProArt创艺27 Pro PA279CRV显示器,凭借其优秀的性能配置和精准的色彩呈现能力,为您的创作工作带来实质性的帮助,双十一期间低至2799元,性价比很高,简直是创作者们的首选。