亚信科技、郑煤机集团组建合资公司 开创“矿山与装备制造数智运营”新模式拼多多发布2025第一季度财报 营收956.7亿元,同比增长10%“Microsoft 远程桌面”应用明起下架,微软推荐迁移至 Windows App云迹科技港交所申请上市,加速AI服务机器人多元化布局卢伟冰:小米电视放弃对规模数量的过度追求,专注做深技术联想推出新款小新 24 台式一体机:换用AMD 7 H 225、1080P 100Hz摩托罗拉Moto G56手机意外提前上架官网:联发科天玑7060、5200mAh电池全汉推出ATX 3.1 + 80 PLUS白金标准Flex ATX外形尺寸电源快手发布2025年第一季度财报 营收同比增长 10.9%消息称三星电子调整 HBM 团队组织架构,押宝定制化产品iQOO 推出海外版 Neo 10 手机,换装骁龙8s Gen4处理器阳光新能源:设计驱动绿色生活,开创别墅能源新纪元联力推出HYDROSHIFT II LCD CURVED一体式水冷散热器阿里巴巴与SAP达成战略合作 加速企业数字化转型博通推出第三代CPO技术,带宽翻倍至每通道200GbpsDirect3D-S2横空出世!千兆级3D生成提速近10倍,AI建模进入新纪元!北大团队首次系统性评估大语言模型心理特征,推动AI评估新标准美团 AI 业务进展:基础大模型能力接近GPT-4o水平Chrome v137开发者工具重磅升级 Gemini 智能标注让性能分析秒变神器!百度心响iOS版正式上线,智能体应用实现全面覆盖 亚信科技、郑煤机集团组建合资公司 开创“矿山与装备制造数智运营”新模式拼多多发布2025第一季度财报 营收956.7亿元,同比增长10%“Microsoft 远程桌面”应用明起下架,微软推荐迁移至 Windows App云迹科技港交所申请上市,加速AI服务机器人多元化布局卢伟冰:小米电视放弃对规模数量的过度追求,专注做深技术联想推出新款小新 24 台式一体机:换用AMD 7 H 225、1080P 100Hz摩托罗拉Moto G56手机意外提前上架官网:联发科天玑7060、5200mAh电池全汉推出ATX 3.1 + 80 PLUS白金标准Flex ATX外形尺寸电源快手发布2025年第一季度财报 营收同比增长 10.9%消息称三星电子调整 HBM 团队组织架构,押宝定制化产品iQOO 推出海外版 Neo 10 手机,换装骁龙8s Gen4处理器阳光新能源:设计驱动绿色生活,开创别墅能源新纪元联力推出HYDROSHIFT II LCD CURVED一体式水冷散热器阿里巴巴与SAP达成战略合作 加速企业数字化转型博通推出第三代CPO技术,带宽翻倍至每通道200GbpsDirect3D-S2横空出世!千兆级3D生成提速近10倍,AI建模进入新纪元!北大团队首次系统性评估大语言模型心理特征,推动AI评估新标准美团 AI 业务进展:基础大模型能力接近GPT-4o水平Chrome v137开发者工具重磅升级 Gemini 智能标注让性能分析秒变神器!百度心响iOS版正式上线,智能体应用实现全面覆盖
  • 首页 > 云计算频道 > 大模型

    OpenAI发布sCM提升50倍效率,扩散模型重大技术突破!

    2024年10月24日 09:30:42   来源:AIGC开放社区公众号

      今天凌晨,OpenAI发布了全新扩散模型方法sCM,仅需2步就能生成高质量图片、3D模型等实现50倍时钟加速,尤其是在高分辨率任务上相当出色。

      例如,通过sCM训练了一个15亿参数的模型,在单个A100GPU上无需任何推理优化0.11秒内就能生成内容。

      目前,扩散模型生成图片最快的是Stability AI开源的SD快速版本,4步就能生成高质量图片。而Scm在保证质量的前提下又将推理效率提升了1倍,同时简化了连续时间一致性模型的理论公式,允许模型在更大数据集上进行稳定的训练和扩展。

      sCM的核心原理是基于一致性模型思路,通过直接将噪声转换为无噪声样本来生成数据。在传统扩散模型中,数据生成过程被视作一条从噪声到数据的渐进路径,每一步都通过去噪来逐渐恢复数据的清晰度。

      一致性模型则恰恰相反,可找到一条更直接的路径,在单步或少数几步内直接从噪声状态跳跃到数据状态。

      sCM采用了连续时间框架,使得模型在理论上可以在连续的时间轴上进行操作,从而避免了离散时间模型中的离散化误差。在连续时间于一致性模型中,模型的参数化、扩散过程和训练目标都被重新定义,以适应连续时间的设置。

      例如,模型的参数化不再依赖于离散的时间步,而是直接依赖于时间本身。这种连续时间的参数化方式使得模型能够更精确地捕捉数据生成过程中的动态变化。

      在网络架构方面,sCM引入了改进的时间条件、自适应组归一化、新的激活函数和自适应权重,以提高模型的训练稳定性和生成质量。改进的时间条件使得模型能够更准确地感知时间t的变化,从而在生成过程中做出更合理的决策。

      自适应组归一化则有助于模型在训练过程中保持内部特征的稳定性,减少训练过程中的噪声干扰。新的激活函数被引入以增强模型的非线性表达能力,使得模型能够更好地学习复杂的数据分布。

      而自适应权重的引入允许模型根据训练数据的分布动态调整损失函数中的权重,从而减少了不同时间步长之间的损失方差。

      为了评估sCM的性能,研究人员在CIFAR-10、ImageNet64×64和ImageNet512×512多个数据集上进行了综合评测。结果显示,sCM成为目前最高效的扩散生成方法。

      例如,在ImageNet512×512数据集上,sCM的模型达到了1.88FID,同时使用的算力更少、更高效。

      有网友表示,如果把这个方法用在视频领域,那实时视频可能很快会到来。Sora的推理负担也会降低很多。

      很高兴又看到OpenAI分享技术论文了。

      如果把这个技术用在Sora,它应该快公测了吧?

      这种简化的模型非常适合需要快速结果而不影响质量的应用!

      这个模型相当有前途啊。

      2步就能生成内容,这会再一次改变游戏规则啊。

      把这个技术用在Sora,应该就快来了吧?

      目前,OpenAI已经分享了该论文方法,是由两位华人提出来的。

      文章内容仅供阅读,不构成投资建议,请谨慎对待。投资者据此操作,风险自担。

    即时

    vivo携手首届商学院戈壁友谊赛,以专业影像见证无畏征途

    2025年5月4日,首届商学院戈壁友谊赛于甘肃省酒泉市圆满举办。在这场4天121公里的戈壁征途中,vivo作为战略合作伙伴,为赛事提供手机、智能穿戴设备及定制影像服务,以技术赋能助力参赛选手与观众记录戈壁之上的热血奔赴,共同探索科技进步、商业文明与自然共生的未来路径。

    新闻

    明火炊具市场:三季度健康属性贯穿全类目

    奥维云网(AVC)推总数据显示,2024年1-9月明火炊具线上零售额94.2亿元,同比增加3.1%,其中抖音渠道表现优异,同比有14%的涨幅,传统电商略有下滑,同比降低2.3%。

    企业IT

    重庆创新公积金应用,“区块链+政务服务”显成效

    “以前都要去窗口办,一套流程下来都要半个月了,现在方便多了!”打开“重庆公积金”微信小程序,按照提示流程提交相关材料,仅几秒钟,重庆市民曾某的账户就打进了21600元。

    3C消费

    华硕ProArt创艺27 Pro PA279CRV显示器,高能实力,创

    华硕ProArt创艺27 Pro PA279CRV显示器,凭借其优秀的性能配置和精准的色彩呈现能力,为您的创作工作带来实质性的帮助,双十一期间低至2799元,性价比很高,简直是创作者们的首选。