最新研究不用摄像头,仅靠WiFi就能看到你
现在,不用摄像头,只靠WiFi就能"看到"一个人在房间里的全部动作了。
准确地说,是输入WiFi信号,就能输出一个3D人体姿态,也就是一个包含了关节或骨骼关键点,能够描述人行为动作(也就是姿态)的三维模型,就像是下面这样:
这项研究的论文于2022年12月31日发表在预印本网站Arxiv,作者则来自卡耐基梅隆大学的一个团队,他们表示,人体姿态的估计或识别在当下很多场景中都能用到(如自动驾驶、医疗救助等),但使用传统的摄像头、传感器或者雷达却存在难以保证隐私安全、成本限制等问题。
为了解决这些问题,团队便想到了现在几乎家家必备的WiFi,所要用到的设备为两个路由器,其核心原理也并不难——WiFi信号在遇到人体运动时会改变其传播路径,进而使得接收器收到的信号的相关数据产生不同程度的变化,通过分析这些变化的具体参数,就能实现人体感知。
不过,这种方式只能定位物体的中心,如果存在手机、微波炉等电磁干扰,定位精度也会下降。因此,研究团队构建了一种神经网络架构,可以通过WiFi中进行关键点较为密集的人体姿态估计。具体分为三步:
进行振幅和相位的"消毒"(Sanitization)操作,对原始WiFi信号中的关键数据进行清理;
将上述清理过的数据通过双分支的解码器-编码器网络转换为2D特征图;
将2D特征图通过改良后的DensePose-RCNN架构(一种人体姿态估计模型)转换为3D人体模型。
在最终生成模型的效果上,基于拍摄图像生成的三维人体模型与基于WiFi生成的模型相比,性能基本一致。
左:基于图像生成 右:基于WiFi生成
同时,通过对实验结果的数据分析,研究团队还发现,在基于拍摄图像生成的三维人体模型中,由于离摄像机较远的个体在图像中占据的空间较小,也导致了这些主体的信息较少,但在基于WiFi信号生成的结果中,由于WiFi信号包含了整个场景中的所有信息,所以不管主体的位置如何,最终生成的模型数据信息量都相差不大。
AP-m和AP-l两值差异较小,说明结果信息差异也较小。
当然,研究团队也承认,目前基于图像进行人体姿态估计的精度普遍比基于WiFi的方法要更高,他们所提出的新方法虽然在估计人体躯干的姿势方面表现良好,但在检测四肢等细节方面仍然存在困难。
AP指平均精确度,越高越好。
此次论文的一作二作皆为华人,在论文最后,研究者们表示,他们希望未来能收集更多数据拓展工作,使得WiFi设备能成为继RGB相机、激光雷达之后的另一更廉价、更能保护隐私的人体传感器。
编译:南都记者杨博雯
二十四节气雨水,雨落风轻扬雨水,春天的第二个节气。月令七十二候集解解曰正月中,天一生水。春始属木,然生木者必水也,故立春后继之雨水。且东风既解冻,则散而为雨矣。东风解冻,散而为雨。因为春雨滋润,从古自今,绵
公司不肯申报工伤,理由竟是未订合同摘要职工到公司上班一个多月就在工作中受伤了,可主管却以还没订劳动合同和没缴纳社保为由,拒绝为职工申报工伤。职工到公司上班一个多月就在工作中受伤了,照理应该报工伤,可主管却以还没订劳
这个考古遗址是吃出来的?瘦的胖的,圆的尖的这个考古遗址里几乎全是螺蛳壳面积约4。2万平方米螺蛳壳堆积最厚的地方足足有6米多且大小不一形态各异考古工作者在云南古城村遗址现场进行分类工作(2022年11月24
多家知名企业布局社区餐饮成为新机遇本报记者钟楚涵蒋政上海报道近年来,部分知名餐饮企业如呷哺集团等都在社区餐饮领域有所布局。此外,还有主打社区餐饮的新品牌比如牛爽爽五味小面等出现,这都显示着社区餐饮赛道正在升温。连锁
湾区新青年85后传奇女作家用动漫讲好中国故事央广网东莞2月19日消息(记者夏燕实习生陈椿)13岁写小说16岁出版第一本小说集17岁成为中国作家协会最年轻的会员18岁创办动漫工作室20多岁创作的剧本被改编成热门动画热播这些堪称
江苏事业单位招聘笔试成绩当年多次有效基层事业单位可适当降低开考比例本报讯(夏韵中青报中青网记者李超)记者近日从江苏省人社厅举行的人才人事政策新闻发布会上获悉,江苏省明确事业单位招聘笔试成绩当年多次有效差额确定体检考察人选等创新举措,基层事业单位招
1981年中央找到李敏,交给她三样东西你父亲给你留下了一份遗产在阅读此文之前,麻烦您点击一下关注,既方便您进行讨论与分享,又给您带来不一样的参与感,感谢您的支持!前言1981年,在毛主席逝世后,有人联系上了李敏,说毛主席给她留下了一份遗产。她
高等教育出版社工会组织职工参与公益活动本报讯(记者周美玉)希望我们编织的每一件作品,都能成为贫困地区孩子们喜欢的礼物,伴随他们一路成长。高等教育出版社工会相关负责人说。记者昨天获悉,在恒爱行动百万家庭亲情一线牵公益活动
2023年,灵活就业人员不要瞎停保,养老保险还是非常划算的今天看到一位网友说,自己真的要把社保给停了。当然缴纳了养老保险以后是不能退的,如果职工养老保险不缴了,可以在60岁时转为城乡居民养老保险,享受有关养老金待遇。虽然说社保缴费负担重,
恢复通关满月大湾区最大水陆跨境交通运营商已运送旅客超30万人次随着内地与港澳人员往来全面恢复,粤港澳大湾区居民旅游互访的热度不断上升,推动各口岸出入境客流车流持续高位运行。16日,记者从信德中旅获悉,自1月8日香港与内地实施首阶段通关以来,信
外企微观察精品集团扎堆考察中国市场世邦魏理仕(CBRE)近日发布2023年亚太区零售商调查及中国内地调查结果显示,中国内地强劲的消费复苏和消费鼓励政策仍吸引着国际品牌相继入驻,将令中国内地在2023年蝉联亚太区零售