• 首页 > 企业IT频道 > ARVRMR

    研究团队开发基于WiFi视觉的3D人体网格构建系统Wi-Mesh

    2023年02月20日 18:36:08   来源:映维网

      三维网格是由不同顶点和多边形组成的三维对象表示,而它们对于一系列的技术应用都非常有用,包括虚拟现实和增强现实系统。对于这个领域,佛罗里达州立大学和罗格斯大学的研究团队开发了一种基于WiFi视觉的3D人体网格构建系统Wi-Mesh。

      概括来说,所述系统利用WiFi的进步来可视化人体的形状和变形,从而构建相应3D网格。特别是,它利用WiFi设备的多个发射和接收天线来估计WiFi信号反射的二维到达角(2D AoA),以支持WiFi设备能够像我们人类一样感知物理环境。然后,它仅从物理环境中提取人体图像,并利用深度学习模型将提取的人体数字化为3D网格表示。

      在各种室内环境下的实验评估表明,Wi-Mesh实现了2.81cm的平均顶点位置误差和2.4cm的关节位置误差,这与使用专用硬件的系统相当。另外,所提出的系统的优点包括利用普遍存在的WiFi设备以实现潜在的大规模采用,而且它可以支持非视线(NLoS)和照明条件差等基于摄像头的系统所无法正常工作的环境。

      据介绍,相关研究小组专门从事尖端的无线保真传感研究。在之前的研究中,团队开发了使用WiFi设备来感知一系列人类活动和物体的系统,包括大规模人体运动、小规模手指运动、睡眠监测和日常对象。他们的E-eyes和WiFinger系统是最早使用WiFi传感来分类不同类型日常活动和手指手势的系统之。

      对于上述的Wi-Mesh,团队希望评估通常用于通信的WiFi设备是否同样可以帮助构建3D人体网格。3D人体网格以三维方式表示人体表面,捕获不同人的身高、体重、体型、身体比例和关节引起的身体变形。

      研究人员解释道:“3D人体网格存在诸多应用,包括VR/AR内容创建。”

      他们创建的Wi-Mesh系统利用集成在普通Wi-fi通信设备中的多个天线来创建人体网格。本质上,系统发射WiFi信号来探测人体,然后分析反射以得出人体的形状。

      他们指出:“我们的系统分析人体反射,以估计信号反射的二维到达角(2DAoA),从而允许无线设备像人类一样‘看到’环境。然后,系统提取人体的2D AoA图像,并进一步利用深度学习模型将人体的2D A oA图像转换为3D网格表示,而3D网格表示可用于各种人机交互(HCI)应用,如VR/AR内容创建。”

      Wi-Mesh在创建3D人体网格方面具有数个优于传统摄像头系统的优点。最值得注意的是,Wi-Mesh支持非视线(NLoS)和照明条件差等场景。Wi-Mesh甚至可以穿过墙壁和障碍物,因为Wi-fi信号可以穿透它们。

      与其他提议的系统相比,Wi-Mesh同时不依赖可穿戴传感器或标记,所以易于使用。最后,这一新系统可以利用现有的Wi-fi通信设备轻松部署,使其更经济实惠,有助于广泛采用。

      研究人员指出:“这一突破意味着Wi-fi设备不仅可以通信,而且可以‘看到’和可视化人体,从而提供了新水平的感知能力。”

      相关论文:3D Human Mesh Construction Leveraging Wi-Fi

      这组研究很快会为构建不同技术应用的人体网格提供令人兴奋的全新可能。未来,Wi-Mesh系统可用于创建更好的VR和AR内容,从而进一步弥合物理世界和虚拟世界。

      文章内容仅供阅读,不构成投资建议,请谨慎对待。投资者据此操作,风险自担。

    即时探行数字人注册免费试用

    数智技术助力爆品营销策略,多款新品火爆点燃中国休闲卤制

    四月中旬,为庆祝绝味鸭脖创立19周年,绝味鸭脖更是以“19岁,绝美青春”作为周年庆主题,推出全新“爆耐撕绝绝脂大刀肉片”,并从产品卖点出发,整合全渠道资源进行营销传播,收获消费者的一致好评,全网声量火爆,线下好评如潮。

    新闻探行AI智能外呼系统 节省80%人力成本

    敢闯技术无人区 TCL实业斩获多项AWE 2024艾普兰奖

    近日,中国家电及消费电子博览会(AWE 2024)隆重开幕。全球领先的智能终端企业TCL实业携多款创新技术和新品亮相,以敢为精神勇闯技术无人区,斩获四项AWE 2024艾普兰大奖。

    企业IT探行AI客服 24小时无休机器人接待

    重庆创新公积金应用,“区块链+政务服务”显成效

    “以前都要去窗口办,一套流程下来都要半个月了,现在方便多了!”打开“重庆公积金”微信小程序,按照提示流程提交相关材料,仅几秒钟,重庆市民曾某的账户就打进了21600元。

    3C消费探行AI视频 快速生成真人营销视频

    “纯臻4K 视界焕新”——爱普生4K 3LCD 激光工程投影

    2024年3月12日,由爱普生举办的主题为“纯臻4K 视界焕新”新品发布会在上海盛大举行。

    研究探行AI整体解决方案 全国招募代理

    2024全球开发者先锋大会即将开幕

    由世界人工智能大会组委会、上海市经信委、徐汇区政府、临港新片区管委会共同指导,由上海市人工智能行业协会联合上海人工智能实验室、上海临港经济发展(集团)有限公司、开放原子开源基金会主办的“2024全球开发者先锋大会”,将于2024年3月23日至24日举办。