全球工业物联网品牌厂商研华科技成功整合英伟达(NVIDIA) 生成式AI模型于MIC-733-AO边缘AI推理盒子,并在英伟达GTC 2024 GPU科技展研华摊位上进行展示(No. 232),该产品预示:未来生成式AI将大幅减少开发者训练模型的时间,在工业应用上也能以更快速更方便的得到AI推理的结果。
研华MIC-733-AO+英伟达生成式AI模型=边缘生成式AI系统
研华MIC-733-AO边缘AI系统基于英伟达Jetson AGX Orin™平台,搭载英伟达Jetson AI实验室的生成式人工智能模型,现在成功高效率运行大型语言模型(LLMs)、视觉语言模型(VLM)、视觉变换器(ViT)以及图像生成和对话生成Llamaspeak,这要归功于英伟达Jetson AGX Orin™平台的独特优势,包括加速计算、重要的AI软件和预先训练的模型,有助于创建、自定义和部署适用于各种应用和地点的生成式AI模型。
利用英伟达Jetson AI实验室的生成式AI模型,AI开发者可以运用检索增强生成(RAG)技术,将LLMs和VLMs连接到公司的知识库。这种方法消除了传统AI模型训练的需求,允许透过与系统的简单对话交互来产生AI推论,明显缩短了开发时间。研华MIC-733-AO拥有高AI运算效能和多个影像输入接口,例如IP摄影机、USB/gigE工业相机、GMSL摄影机、激光雷达等,让开发者可以轻松串接影像讯息结合AI运算,而工业级小体积设计更适合放在边缘端应用,即使在英伟达Jetson AGX Orin运行满载时,出色的散热设计也能防止系统过热确保正常运行。
边缘生成式AI系统反应更实时,应用更多元
生成式AI通过从不同的输入和输出(例如文本和图像)创建新内容,正在改变人与计算机的互动方式。从云端到边缘端,边缘端生成式AI更适合需要快速反应和低延迟环境的良好解决方案。在边缘端生成式AI相对于云端生成式AI的解决方案具有以下几点优势:
实时反应:根据摄影机和传感器等数据来源的边缘计算系统能够立即回应,无需等待与云端上传数据造成的延迟。
数据安全:数据储存在边缘系统中,大幅降低云端数据传输相关的安全风险。
稳定的网络连接:即使没有无线网络,边缘系统也能够操作并将数据存储在本地端,直到网络恢复,而云端生成式AI在没有网络时将无法运作。
低传输成本:边缘端AI因不需要随时传输数据给云端,仅需低量传输,比云端AI随时上传数据更具成本效益。
边缘生成式AI代表了人工智能时代的未来。研华MIC-733-AO边缘生成式AI系统,整合英伟达Jetson AI实验室的生成式AI模型,为AI开发者提供了一个简单的解决方案。
文章内容仅供阅读,不构成投资建议,请谨慎对待。投资者据此操作,风险自担。
5 月 10 日消息,据中兴通讯官微,中兴二合一 5G 云电脑“逍遥”系列已经在电商平台上架。其支持本地、云端双模式,可在电脑与平板模式之间一键切换。售价方面,型号为 W200DS 的产品首销价格为 1899 元。
近日,中国家电及消费电子博览会(AWE 2024)隆重开幕。全球领先的智能终端企业TCL实业携多款创新技术和新品亮相,以敢为精神勇闯技术无人区,斩获四项AWE 2024艾普兰大奖。
“以前都要去窗口办,一套流程下来都要半个月了,现在方便多了!”打开“重庆公积金”微信小程序,按照提示流程提交相关材料,仅几秒钟,重庆市民曾某的账户就打进了21600元。
由世界人工智能大会组委会、上海市经信委、徐汇区政府、临港新片区管委会共同指导,由上海市人工智能行业协会联合上海人工智能实验室、上海临港经济发展(集团)有限公司、开放原子开源基金会主办的“2024全球开发者先锋大会”,将于2024年3月23日至24日举办。