广告

无线电信号+神经网络,MIT研发“隔墙”探测系统

时间:2018-08-02 作者:网络整理 阅读:
拥有像X光一样的透视能力长久以来似乎都还是科幻小说中出现的超能力,不过在最近十年,一个由麻省理工学院计算机科学与人工智能实验室Dina Katabi教授领导的团队,正持续地开发“穿墙透视”技术。

通过无线电波与人工智能的结合,麻省理工学院的研究人员研发了一个全新的射频—姿态(RF-Pose)探测系统,这项技术可以看到墙另一边的人移动的骨骼状图像。虽然这听起来像是特警队在破门而入之前希望拥有的技术,但它已经以一种令人惊讶的方式被用于监控帕金森症患者在家中的活动。OD1EETC-电子工程专辑

该项目的高级研究员、麻省理工学院电子工程和计算机科学教授迪娜·卡塔比(Dina Katabi)说:“人们对这种技术的兴趣可以追溯到几十年前,美国国防部高级研究计划局(DARPA)曾有一个重大项目,试图使用无线信号探测位于墙壁后的人。但在这项最新的研究之前,这些系统所能做的只是显示一个人在墙后的斑点状图形。”OD1EETC-电子工程专辑

20180801-MIT-Detect-1.gifOD1EETC-电子工程专辑

如今,这项技术能够更精确的显示信息:它能把场景中的人描绘成像骷髅一样的木棍,同时显示出他们在做日常活动时的实时动作,比如行走和坐卧。这项技术的重点在于检测人体的关键部位,包括肘关节、臀部和脚。OD1EETC-电子工程专辑

20180801-MIT-Detect.gifOD1EETC-电子工程专辑

卡塔比说道:“当在墙后面的人开始移动时,你就会看到系统创建的火柴人会做出相同的动作,如果那个人坐下来,你就会看到系统中的火柴人也坐下来。” OD1EETC-电子工程专辑
OD1EETC-电子工程专辑
一、 无线电信号反射出人体,神经网络加以识别OD1EETC-电子工程专辑

RF-Pose系统的工作原理是:传输比WiFi功率低1000倍的无线信号,穿透物体,如墙壁,再反射出人体——由于人体大部分由水组成,无线电无法穿透——之后再穿过墙壁回到设备中。OD1EETC-电子工程专辑
Mingmin-RF-Pose-MIT-CSAIL-00.pngOD1EETC-电子工程专辑
RF-Pose系统使用无线信号,可以作为一个医疗保健系统,监测患者在墙壁另一侧的运动。(图片来源:Jason Dorfman / MIT CSAIL)OD1EETC-电子工程专辑

现在的问题是:如何解读系统回传的信息?卡塔比说:“这就是人工智能,特别是神经网络机器学习发挥作用的地方。”OD1EETC-电子工程专辑

人工智能研究人员通过添加注释信息来训练神经网络,使它能从数据中推断出自己的规则以便学习,这个过程就叫做监督学习。以一个识别猫的神经网络为例,其需要人们找到一个很大的图片数据库,并且将其中的图片都标注为“是猫”和“不是猫”。如果想要教一辆自动驾驶汽车红绿灯是什么样的,你需要显示包含红绿灯的图像,并对其进行注释,以便告诉AI什么是红绿灯。OD1EETC-电子工程专辑
RF Pose different scenes - credit MIT CSAIL.pngOD1EETC-电子工程专辑
(图片来源:MIT CSAIL)OD1EETC-电子工程专辑

为了解决这一难题,研究者使用无线设备和摄像头来采集数据。他们拍摄了数千张人类活动场景(如行走、说话、坐下、开门和等电梯)的照片。神经网络通常用来解析图像,但也可以用来执行复杂的任务,比如从一种语言翻译到另一种语言,甚至可以通过模仿所给出的数据生成新的文本。OD1EETC-电子工程专辑

但在这种情况下,有一个问题:没有人能通过无线电无线电信号分析出哪个位置是头,哪个位置是脚。换句话说,通过图像处理信息很容易,但通过人身上反射的无线电信号数据处理信息就没那么轻松了。 OD1EETC-电子工程专辑
RF Pose confidence maps and skeleton - credit MIT CSAIL .pngOD1EETC-电子工程专辑
(图片来源:MIT CSAIL)OD1EETC-电子工程专辑

研究团队的解决方案是在训练期间,把信号接收器和摄像机连接起来,然后给摄像机创建的图像贴上信息标签,并且提取出不同姿势的人类简略骨架(火柴人图,用于表示人体姿态),将其与无线信号对应起来。这样的组合能让系统学习出场景中无线信号和火柴人图之间的关联,帮助神经网络将这些活动联系起来。OD1EETC-电子工程专辑

为了能让摄像机真正接受到图像信号,这些训练工作必须在没有墙的情况下完成。卡塔比解释道:“我们使用摄像机上的信息标签和同时发生的无线电信号来对它们进行训练。”OD1EETC-电子工程专辑

训练结束后,他们惊讶地发现,尽管这个系统只对可见的人进行了训练,但他们依然能探测到隐藏于墙背后的人。“它们能看到并描绘出墙壁后面的人形,尽管在训练中它们从未见过。” 卡塔比说道。 不仅如此,它甚至可以通过人们的步态来区分他们。在另一个神经网络的帮助下,该系统可以记录人们走路的特征并识别不同的人,即使隔着墙壁,识别个体的准确率仍超过83%。OD1EETC-电子工程专辑

二、 初步应用于治疗帕金森患者

研究人员已开始将“RF-Pose”项目付诸实践,在一项针对帕金森患者的小型研究中,通过在病人家中安装这些设备,他们可以在舒适的环境下监控类似帕金森、多发性硬化症(MS)和肌肉萎缩症等疾病,为医生提供更多信息,从而对症下药。这项技术也将通过监测跌倒、受伤和运动模式的变化,来帮助老年人能够更独立的生活。他们现在正和医生们合作,来探索“RF-Pose”在医疗领域的应用。OD1EETC-电子工程专辑

从这个意义上说,它比传统的视频监控少了些许侵入性,患者也不必佩戴传感器或要记着给他们的设备充电。OD1EETC-电子工程专辑

这项研究共涉及7人,历时8周。 卡塔比说:“系统分析的结果与用于评估患者的标准问卷‘高度相关’。” 此外,它还揭示了关于帕金森患者生活质量的更多信息。OD1EETC-电子工程专辑

目前,Michael J. Fox基金会正在资助团队进行进一步的研究;卡塔比说,通过这种方式监测病人可以帮助患者避免“白大褂综合症”,即病人在医生面前就诊时表现不同。 这项技术的使用也会引发相应的隐私问题,但卡塔比解释过,在没有得到人们同意的情况下,它不会被应用于任何人身上。OD1EETC-电子工程专辑

团队成员将展示成果

除了医疗健康领域的应用,团队表示,该项目还可以用在需要玩家在整个房子中移动的视频游戏中,或者需要定位幸存者的搜救任务等。OD1EETC-电子工程专辑

除了卡塔比教授,该论文的作者还包括博士生Mingmin Zhao(赵明民,一作)、Antonio Torralba教授、硕士生Tianhong Li、博士后Mohammad Abu Alsheikh、博士生Yonglong Tian、博士生Hang Zhao。OD1EETC-电子工程专辑

在这篇论文中,模型的输出是二维的火柴人骨架图。不过该团队正在将其扩展到三维,以监测更小幅度的运动。比如,这个系统将能够通过观察老年人的手的摆动规律,来确定是否需要健康检查。OD1EETC-电子工程专辑

Torralba说:“如果你把计算机视觉系统当成一个老师,那么这个例子真的很有趣,作为学生的无线信号观测系统居然比老师还厉害了。”OD1EETC-电子工程专辑

赵明民表示:“通过视觉数据和AI结合实现穿墙观测,通过视觉数据和AI结合实现穿墙观测,我们能够更好地理解生活场景,提供让生活更安全,高效的环境。”OD1EETC-电子工程专辑

他们将在本月晚些时候在犹他州盐湖城召开的计算机视觉与模式识别会议(Conferenceon Computer Visionand Pattern Recognition,CVPR)上展示这一成果。OD1EETC-电子工程专辑

本文综合自智东西、MIT News、人工智能训练营、前瞻网报道OD1EETC-电子工程专辑

 OD1EETC-电子工程专辑

qrcode_EETCwechat_120.jpgOD1EETC-电子工程专辑

关注最前沿的电子设计资讯,请关注“电子工程专辑微信公众号”OD1EETC-电子工程专辑

本文为EET电子工程专辑 原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
您可能感兴趣的文章
  • 除了汽车,毫米波雷达还可以应用到哪些地方? 毫米波作为一种非接触式传感技术,可用于检测物体,并提供物体的距离、速度和角度信息。其工作频谱范围为 30GHz 至 300GHz,具有较小的波长,因此可以提供亚毫米的测距精度。此外,毫米波能够穿透塑料、墙板和衣服等特定材料,并且不受雨、雾、灰尘和雪等环境条件的影响。在 60-64GHz和76-81GHz 的频率下,将距离解析为波长的毫米波系统精度可达到毫米级。77GHz频段现已广泛应用于汽车ADAS和自动驾驶,但在非汽车应用领域受到严格限制。因此,在工厂自动化、楼宇自动化、城市交通管理,以及需要人机交互的场合,60GHz成为最佳选择。
  • 上新了RFSoC,全球6GHz以下频段5G部署迎来福音 受益于韩国、中国和美国5G或者早期5G(Pre-5G)的部署,以及LTE设备升级等利好消息的影响,赛灵思(Xilinx)公司2019财年第3季度的季度营收较去年同期增长34%,达到8亿美元,公司股票也创下了自上世纪九十年代上市以来的历史新高。
  • 频谱争夺战驱动C4IS进步 根据市场研究公司IHS Markit,由于世界变得越来越危险、抢占电磁频谱的竞争加剧,加上地缘政治的竞争对手(如中国)拥有更强大的武器,C4ISR系统性能将进一步扩展…
  • 中芯宁波与宜确半导体联合宣布首次实现砷化镓射频前端 uWLSI是一个先进的晶圆制造技术平台,不仅助力宜确的砷化镓pHEMT射频前端模组产品实现出众的微型化,而且显著提高其核心组件间互连的射频特性。
  • 华为在美技术不能用到国内是怎么回事,与孟晚舟有啥关系 昨日,华为又遭受到到一轮新的打击:美国商务部表示不会续签华为在美子公司的出口许可证,意味着这家中国电信巨头无法将其在硅谷研究的部分技术运回国内。
  • 笙科发布2.4GHz无线收发SOC芯片A8125M0 A8125M0的传输速度高达2Mbps,支持FSK与GFSK调变,数字部份整合高效能ARM Cortex-M0,内建128Kbytes Flash Memory、32Kbytes SRAM,与24/23个GPIO与各种数字接口。
相关推荐
    广告
    近期热点
    广告
    广告
    广告
    可能感兴趣的话题
    广告