2025WAIC丨腾讯云副总裁吴运声:把AI变成全新生产力不止霸榜618!灵宇宙WAIC首秀新功能:拍玩具“活”过来,这才是AI万物有灵业界首个,智元机器人稚晖君发布“灵渠 OS”开源计划意法半导体计划以 9.5 亿美元收购恩智浦 MEMS 微机电传感器业务安慕斯携手行业领军企业共同发起一次性卫生用品行业高质量发展倡议暑期出境游用鸿蒙 5解锁新体验,海外自由行尽享“鸿蒙一夏”华为中国政企用户峰会2025成功举办丨倾听·践行 共创AI新时代北京大学 鲲鹏昇腾科教创新卓越中心突破:自主创新软件SPONGE性能超越国际主流GPU方案民族记忆 · 和平之光丨国际和平艺术家:邢凌云新秀亮相长青压阵 360游戏确认参展2025 ChinaJoy凯华 X ChinaJoy强势来袭!一键开启热血盛夏!巨人网络确认参展2025 ChinaJoy鹅鸭杀和他的朋友们来了!金山世游确认参展 2025 ChinaJoy2025 ChinaJoy 展会服务全面升级!为观众打造极致体验2025 ChinaJoy 展馆地图正式发布2025 中国游戏开发者大会(CGDC)动作冒险射击游戏专场、独立游戏专场嘉宾曝光2025 年第 22 届 ChinaJoy 展前预览(同期会议篇—CGDC)正式发布希尔顿集团联动滴滴宠物出行,升级携宠 "住行一体"体验SuperCLUE发布工业大模型测评最新榜单,北电数智骄阳·工业大模型综合排名第一云计算年增34.4%,算力厂商迎来扩量增利窗口 2025WAIC丨腾讯云副总裁吴运声:把AI变成全新生产力不止霸榜618!灵宇宙WAIC首秀新功能:拍玩具“活”过来,这才是AI万物有灵业界首个,智元机器人稚晖君发布“灵渠 OS”开源计划意法半导体计划以 9.5 亿美元收购恩智浦 MEMS 微机电传感器业务安慕斯携手行业领军企业共同发起一次性卫生用品行业高质量发展倡议暑期出境游用鸿蒙 5解锁新体验,海外自由行尽享“鸿蒙一夏”华为中国政企用户峰会2025成功举办丨倾听·践行 共创AI新时代北京大学 鲲鹏昇腾科教创新卓越中心突破:自主创新软件SPONGE性能超越国际主流GPU方案民族记忆 · 和平之光丨国际和平艺术家:邢凌云新秀亮相长青压阵 360游戏确认参展2025 ChinaJoy凯华 X ChinaJoy强势来袭!一键开启热血盛夏!巨人网络确认参展2025 ChinaJoy鹅鸭杀和他的朋友们来了!金山世游确认参展 2025 ChinaJoy2025 ChinaJoy 展会服务全面升级!为观众打造极致体验2025 ChinaJoy 展馆地图正式发布2025 中国游戏开发者大会(CGDC)动作冒险射击游戏专场、独立游戏专场嘉宾曝光2025 年第 22 届 ChinaJoy 展前预览(同期会议篇—CGDC)正式发布希尔顿集团联动滴滴宠物出行,升级携宠 "住行一体"体验SuperCLUE发布工业大模型测评最新榜单,北电数智骄阳·工业大模型综合排名第一云计算年增34.4%,算力厂商迎来扩量增利窗口
  • 首页 > 云计算频道 > 大模型

    Google AI推出SANPO:多属性视频数据集助力高级视觉场景理解

    2023年10月16日 18:53:07 来源:站长之家

      Google AI最近推出了名为SANPO的数据集,旨在帮助AI模型更好地理解户外人类主观场景。这一数据集的重要性在于,它不仅包括真实世界的数据,还包括合成数据,以及丰富的注释和多属性特征。这个数据集的推出将有助于解决自动驾驶领域之外的人类主观场景理解的问题。

      SANPO数据集的名称来源于其功能,包括“场景理解、可访问性、导航、路径规划和障碍物避免”。它由真实世界数据和合成数据组成,其中真实世界数据包括来自两个立体摄像头的视频,支持多视角方法。这个数据集还包括了11.4小时的视频,以每秒15帧的速度捕获,并具有密集的注释。

      为了保护隐私,Google的研究人员在数据采集过程中遵循了当地、城市和州级的法律,并在发送数据进行注释之前,确保删除了任何个人信息,如人脸和车辆牌照。

      为了克服捕捉视频时的不完美,比如运动模糊和人工评分错误,研究人员引入了SANPO-Synthetic,这是一个高质量的合成数据集,旨在与真实世界的条件相匹配。SANPO-Synthetic包括1961个会话,使用虚拟化的Zed相机录制,头部和胸部位置均衡分布。

      SANPO数据集的另一个特点是对一部分真实世界数据和合成数据进行了全景实例掩模的注释,为每个像素分配了类别和ID。与真实世界数据不同,SANPO-Synthetic每帧包含更多实例。此外,SANPO是唯一一个同时具有全景分割和深度图像数据的数据集。

      研究人员使用SANPO数据集训练了两个最先进的模型,分别用于深度估计和全景分割。他们发现,这一数据集对于密集预测任务来说非常具有挑战性,而合成数据的准确性要高于真实数据,这主要是因为真实世界的环境相对复杂,而合成数据的分割注释更加精确。

      SANPO数据集的推出填补了人类主观场景理解领域缺乏数据集的空白,它包括真实世界和合成数据,具有丰富的注释和多属性特征,以及全景分割和深度信息的独特组合。此外,研究人员的隐私承诺使这一数据集能够支持其他研究人员开发面向视障人士的视觉导航系统,并推动先进的视觉场景理解领域的发展。

      文章内容仅供阅读,不构成投资建议,请谨慎对待。投资者据此操作,风险自担。

    海报生成中...

    最新新闻

    热门新闻

    即时

    全球顶级AI创作社区回归!海艺AI国内首发“全民娱乐化创作

    海艺AI的模型系统在国际市场上广受好评,目前站内累计模型数超过80万个,涵盖写实、二次元、插画、设计、摄影、风格化图像等多类型应用场景,基本覆盖所有主流创作风格。

    新闻

    明火炊具市场:三季度健康属性贯穿全类目

    奥维云网(AVC)推总数据显示,2024年1-9月明火炊具线上零售额94.2亿元,同比增加3.1%,其中抖音渠道表现优异,同比有14%的涨幅,传统电商略有下滑,同比降低2.3%。

    企业IT

    重庆创新公积金应用,“区块链+政务服务”显成效

    “以前都要去窗口办,一套流程下来都要半个月了,现在方便多了!”打开“重庆公积金”微信小程序,按照提示流程提交相关材料,仅几秒钟,重庆市民曾某的账户就打进了21600元。

    3C消费

    华硕ProArt创艺27 Pro PA279CRV显示器,高能实力,创

    华硕ProArt创艺27 Pro PA279CRV显示器,凭借其优秀的性能配置和精准的色彩呈现能力,为您的创作工作带来实质性的帮助,双十一期间低至2799元,性价比很高,简直是创作者们的首选。