• 首页 > 企业IT频道 > 人工智能

    谷歌新AI研究:基于图像分析模型和NeRF 可根据文本合成3D模型

    2022年10月09日 16:12:49   来源:青亭网

      利用DALL·E从文字合成图片相信大家已经比较熟悉,近年来类似的研究不少,比如Meta前不久公布的Make-A-Video研究,即利用AI才能够文本合成视频。近期,谷歌也公布了一项新的AI模型Dreamfusion,该模型的特点是将AI图像分析模型Imagen与NeRF(神经辐射场)结合,可根据文本来合成3D模型。

      据青亭网了解,谷歌在2021年底曾推出3D合成AI系统Dream Fields,Dreamfusion则是在此基础上的演变,区别是Dreamfusion利用Imagen来取代OpenAI的CLIP图像分析模型,Imagen是谷歌预训练的2D文本图像扩散模型。而神经辐射场的部分则提供了合成3D视图的能力,并允许在神经网络中存储3D模型,接着通过Marching Cubs三维重建算法,可导出为具有网格的3D模型,并在常见的3D渲染引擎、建模软件中使用。

      简单来讲,Imagen的优势在于使用2D文本图像即可训练,更容易规模化。Dreamfusion会使用Imagen生成的多视角2D图像来学习3D渲染,实现用文本来合成3D模型。此外相比于Dream Fields,Dreamfusion可合成更高质量、具有深度和法线的、可重新照明的3D模型,因此整体效果更逼真。而且,Dreamfision生成的多个3D模型可缝合到同一个场景中。

    ezgif-1-04bbe69bb7

      参考:Mixed

      文章内容仅供阅读,不构成投资建议,请谨慎对待。投资者据此操作,风险自担。

    即时探行数字人注册免费试用

    新闻探行AI智能外呼系统 节省80%人力成本

    敢闯技术无人区 TCL实业斩获多项AWE 2024艾普兰奖

    近日,中国家电及消费电子博览会(AWE 2024)隆重开幕。全球领先的智能终端企业TCL实业携多款创新技术和新品亮相,以敢为精神勇闯技术无人区,斩获四项AWE 2024艾普兰大奖。

    企业IT探行AI客服 24小时无休机器人接待

    重庆创新公积金应用,“区块链+政务服务”显成效

    “以前都要去窗口办,一套流程下来都要半个月了,现在方便多了!”打开“重庆公积金”微信小程序,按照提示流程提交相关材料,仅几秒钟,重庆市民曾某的账户就打进了21600元。

    3C消费探行AI视频 快速生成真人营销视频

    “纯臻4K 视界焕新”——爱普生4K 3LCD 激光工程投影

    2024年3月12日,由爱普生举办的主题为“纯臻4K 视界焕新”新品发布会在上海盛大举行。

    研究探行AI整体解决方案 全国招募代理

    2024全球开发者先锋大会即将开幕

    由世界人工智能大会组委会、上海市经信委、徐汇区政府、临港新片区管委会共同指导,由上海市人工智能行业协会联合上海人工智能实验室、上海临港经济发展(集团)有限公司、开放原子开源基金会主办的“2024全球开发者先锋大会”,将于2024年3月23日至24日举办。