研究论文

米^三轨道：<u> 基于波的多用户3D姿态跟踪

作者:

一曹陈、和

凌河香港作者信息和声明

MobiSys’22：第20届移动系统、应用程序和服务国际年会会议记录

2022年6月

页491-503

https://doi.org/10.1145/3498361.3538926

出版:2022年6月27日出版历史

获取访问权限

摘要

如今，三维人体姿态跟踪市场已经扩展到广泛的应用场景。作为当前的主流解决方案，基于视觉的姿态跟踪系统存在隐私泄露问题，并且依赖于照明条件。为了更保护隐私和更稳健的跟踪方式，最近的工作已经利用商品射频信号来实现3D人体姿势跟踪。然而，这些研究无法处理多个用户位于同一空间的情况。本文提出了一种基于波的多用户三维姿态跟踪系统，米^三轨道它利用单个商用off-the-shelf（COTS）mmWave雷达同时跟踪多个用户在移动、行走或坐下时的姿势。基于多用户场景中毫米波雷达的感应信号，米^三轨道首先在mmWave信号上分离所有用户。然后，米^三轨道提取每个用户的形状和运动特征，并通过设计的深度学习模型为每个用户重建三维人体姿态。此外。米^三轨道将所有用户的重构三维姿态映射到三维空间，并通过坐标校正跟踪方法跟踪用户位置，利用COTS毫米波雷达实现实用的多用户三维姿态跟踪。在真实的多用户场景中进行的实验验证了米^三轨道多用户3D姿态跟踪。

工具书类

[1]

伯纳德·博莱、弗朗索瓦·布雷蒙德和莫妮克·托纳。2003.视频序列中的人体姿势识别。在程序。IEEE VS-PETS’03。

[2]

韩翠和奈姆·达农。2021.使用毫米波雷达进行高精度人体检测和跟踪。IEEE航空航天和电子系统杂志36, 1 (2021), 22--32.

[3]

罗斯·吉希克（Ross Girshick）。2015年，快速r-cnn。在程序。IEEE ICCV’15。1440--1448.

数字图书馆

[4]

顾天波、郑芳、杨志成、胡鹏飞和马哈帕特拉。2019.mmSense：通过mmWave Sensing进行多人检测和识别。在程序。ACM公司mmNets@移动通信 '19.墨西哥洛斯卡布斯，45-50。

数字图书馆

[5]

关俊峰（Junfeng Guan）、索赫拉布·马达尼（Sohrab Madani）、苏拉杰·乔格（Suraj Jog）、索拉巴·古普塔（Saurabh Gupta）和海塔姆·哈萨尼耶（Haitham Hassanieh）。2020.使用毫米波雷达进行雾透高分辨率成像。在程序。IEEE/CVf CVPR’20。华盛顿州，美国，11461-11470。

[6]

伊曼纽尔·安科·彼得·哈贝茨、雅各布·贝内斯蒂、以色列科恩、沙伦·甘诺和杰克·德莫乔夫斯基。2009年，对MVDR波束形成器室内声学的新见解。IEEE音频、语音和语言处理汇刊18, 1 (2009), 158--170.

[7]

德克萨斯仪器公司。2021.AWR1443单芯片76-GHz至81-GHz汽车雷达传感器，集成MCU和硬件加速器。[在线]。可用：https://www.ti.com/product/AWR1443。

[8]

德克萨斯仪器公司。2021.用于雷达感应评估模块的DCA1000EVM实时数据采集适配器。[在线]。可用：https://www.ti.com/tool/DCA1000EVM。

[9]

姜成坤、郭俊晨、袁和、孟进、李帅和刘云浩。2020年。mmVib：使用毫米波雷达进行微米级振动测量。在程序。ACM MobiCom’20。英国伦敦，45:1--45:13。

[10]

蒋文军、薛鸿飞、苗成林、王世阳、林森、田冲、斯里尼瓦桑·穆拉利、胡浩晨、孙智和鲁苏。2020。使用wifi构建3D人体姿势。在程序。ACM MobiCom’20。英国伦敦，23:1--23:14。

[11]

蒋文超和尹兆正。2015年，通过深度卷积神经网络使用可穿戴传感器进行人类活动识别。在程序。ACM 15毫米。澳大利亚布里斯班，1307-1310。

数字图书馆

[12]

李会宁、徐晨翰、阿迪蒂亚·辛格·拉托尔、李正雄、张汉斌、陈松、王坤、卢苏、冯琳、奎仁和徐文耀。2020年。语音打印：通过mmWave生物特征询问探索弹性和安全的语音身份验证。在程序。ACM SenSys’20。日本，312-325。

数字图书馆

[13]

李翔、李胜杰、张大庆、熊洁、王亚莎和洪梅。2016年，动感音乐：准确无设备室内定位。在程序。ACM UbiComp’16。德国海德堡，196-207。

数字图书馆

[14]

Aristidis Likas、Nikos Vlassis和Jakob J Verbeek。2003年，全球k-means聚类算法。模式识别36, 2 (2003), 451--461.

[15]

刘海鹏、王玉恒、周安福、何汉岳、王伟、王坤鹏、潘佩林、卢一轩、刘亮和马华东。2020年。通过毫米波传感实现智能家居场景中的实时手臂手势识别。程序。ACM IMWUT公司4, 4 (2020), 140:1--140:28.

数字图书馆

[16]

微软。2021.适用于Windows的Kinect。[在线]。可用：https://developer.microsoft.com/en-us/windows/kinect/。

[17]

Kun Qian、Chenshu Wu、Zheng Yang、Yunhao Liu和Kyle Jamieson。2017.Widar：通过商品Wi-Fi的速度监测实现分米级被动跟踪。In程序。17年ACM MobiHoc。印度钦奈，6。

数字图书馆

[18]

钱昆、吴晨曙、张毅、张桂东、杨郑和刘云浩。2018.Widar2.0：使用单一Wi-Fi链路进行被动人体跟踪。在程序。ACM Mobilys'18。德国慕尼黑，350-361。

数字图书馆

[19]

穆罕默德·库瓦尔德和苏比尔·比斯瓦斯。2008年。使用带有可穿戴传感器网络的隐马尔可夫模型进行身体姿势识别。Bodynets公司8 (2008), 1--8.

[20]

周仁、袁俊松、孟晶晶、张正友。2013.使用kinect传感器的基于零件的鲁棒手势识别。IEEE多媒体事务15, 5 (2013), 1110--1120.

数字图书馆

[21]

玛丽亚·伊莎贝尔·里贝罗。卡尔曼和扩展卡尔曼滤波器：概念、推导和特性。系统与机器人研究所43 (2004), 46.

[22]

赫尔曼·罗林。1983.杂波和多目标情况下的雷达恒虚警阈值。IEEE航空航天和电子系统交易4 (1983), 608--621.

[23]

Arindam Sengupta、Feng Jin和Siyang Cao。2020年。使用毫米波雷达点云的基于NLP的骨骼姿势估计：模拟方法。在程序。IEEE RadarConf’20。美国佛罗伦萨，1-6。

[24]

Arindam Sengupta、Feng Jin、Renyuan Zhang和Siyang Cao。2019.mmPose：使用mmWave雷达和CNN进行实时人体骨骼姿势估计。CoRR公司abs/1911.09592（2019）。

[25]

阿格涅斯卡·索罗科夫斯卡、彼得·索罗科斯基、彼得·希尔珀特、卡塔兹娜·坎塔雷罗、托马斯·弗拉科威亚克、科达巴赫什·艾哈迈迪、艾哈迈德·阿尔赫拉伊贝、里奇蒙德·阿耶提、安娜·贝托尼、卡里姆·贝塔奇等人，2017年。首选人际距离：全球比较。跨文化心理学杂志48, 4 (2017), 577--592.

[26]

王建武（Jianwu Wang）、黄志川（Zhichuan Huang）、张文斌（Wenbin Zhang）、安基塔·帕蒂（Ankita Patii）、科坦·帕蒂尔（Ketan Patil）、朱婷（Ting Zhu）、埃里克·J·希罗玛（Eric J Shiroma）、米切尔。基于可穿戴传感器的人体姿态识别。在程序。IEEE大数据’16。IEEE，美国华盛顿特区，3432-3438。

[27]

吴晨曙、张峰、王蓓蓓和刘凯杰。2020年。mmTrack：使用商品毫米波无线电进行被动多人定位。在程序。IEEE INEOCOM’20。IEEE，加拿大安大略省多伦多市，2400--2409。

[28]

姜晓，吴凯顺，易友文，王璐，倪莱昂内尔，2013。试点：使用信道状态信息进行无源无设备室内定位。在程序。IEEE ICDCS’13。IEEE，美国宾夕法尼亚州费城，236-245。

数字图书馆

[29]

谢亚雄、熊洁、莫莉和凯尔·杰米森。2019.mD-Track：利用多维度进行被动室内Wi-Fi跟踪。在程序。ACM MOBICOM’19。墨西哥洛斯卡布斯，1-16。

数字图书馆

[30]

史行健、陈周荣、王浩、杨迪彦、王伟健和吴望春。2015.卷积LSTM网络：降水量预报的机器学习方法。在程序。NeurIPS’15。加拿大魁北克省蒙特利尔市，802-810。

[31]

徐晨翰、李正雄、张汉斌、阿迪蒂亚·辛格·拉托尔、李会宁、陈松、王坤和徐文耀。2019.WaveEar：探索一种基于mmWave的语音用户界面抗噪语音传感。在程序。19年ACM MobiSys。韩国首尔，14-26。

数字图书馆

[32]

薛鸿飞、闫菊、苗成林、王一江、王世阳、张爱东、卢苏.2021。mmMesh：使用毫米波实现3D实时动态人体网格构建。在程序。ACM MobiSys’21。美国威斯康星州，269-282。

数字图书馆

[33]

杨志成（Zhicheng Yang）、帕提·巴沙克（Parth H Pathak）、曾云泽（Yunze Zeng）、西西·利兰（Xixi Liran）和普拉森特·莫哈帕特拉（Prasant Mohapatra）。2016年，使用毫米波监测生命体征。在程序。ACM MobiHoc’16。德国帕德博恩，211-220。

数字图书馆

[34]

杨志成（Zhicheng Yang）、帕提·巴沙克（Parth H Pathak）、曾云泽（Yunze Zeng）、西西·利兰（Xixi Liran）和普拉森特·莫哈帕特拉（Prasant Mohapatra）。2017年。使用毫米波监测生命体征和睡眠。传感器网络ACM事务13, 2 (2017), 1--32.

数字图书馆

[35]

张仁元和曹泗阳。2018.使用毫米波雷达通过CNN进行实时人体运动行为检测。IEEE传感器字母3, 2 (2018), 1--4.

[36]

Mingmin Zhao、Tianhong Li、Mohammad Abu Alsheikh、Yonglong Tian、Hang Zhao，Antonio Torralba和Dina Katabi，2018年。利用无线电信号进行全方位人体姿态估计。在程序。IEEE CVPR’18。美国犹他州盐湖城，7356-7365。

[37]

赵明敏、刘英成、阿尼鲁德·拉古、李天宏、赵航、安东尼奥·托拉尔巴和迪娜·卡塔比。2019。使用无线电信号进行贯通式人体网格恢复。在程序。IEEE/CVF ICCV’19。韩国首尔，10113--10122。

[38]

赵明民（Mingmin Zhao）、田永龙（Yonglong Tian）、赵杭（Hang Zao）、穆罕默德·阿布·阿尔斯海克（Mohammad Abu Alsheikh）、李天宏（Tianhong Li）、鲁门·赫里斯托夫（Rumen Hristov）、扎卡里·卡贝拉克（Zachary Ka。2018年，基于RF-的3D骨架。在程序。ACM SIGCOMM’18。匈牙利布达佩斯，267-281。

数字图书馆

[39]

赵培军（Peijun Zhao）、陆晓萱（Chris Xiaoxuan Lu）、王建安（Jinan Wang）、陈长浩（Changhao Chen）、王伟（Wei Wang），尼基·特里戈尼（Niki Trigoni）和安德鲁·马卡。2019.mID：使用毫米波雷达跟踪和识别人员。在程序。IEEE DCOSS’19。希腊圣托里尼，33-40。

引用人

Bae K公司月亮H金·SOkoshi T公司Ko J公司利坎瓦R(2024)SuperSight:mmWave后向散射的Sub-cm非直瞄定位第22届移动系统、应用和服务国际年会会议记录10.1145/3643832.3661857(278-291)在线发布日期：2024年6月3日
https://dl.acm.org/doi/10.1145/3643832.3661857
哈达R阿隆A巴哈拉迪DSakuta M公司Saruwatari S公司Okoshi T公司Ko J公司利坎瓦R(2024)演示：XR应用程序的UWB定位和跟踪第22届移动系统、应用和服务国际年会会议记录10.1145/3643832.3661840(604-605)在线发布日期：2024年6月3日
https://dl.acm.org/doi/10.1145/3643832.3661840
赖H罗G刘毅赵M甘尼桑D史伟(2024)启用射频视觉识别第30届移动计算和网络国际年会会议记录10.1145/3636534.3649369(388-403)在线发布日期：2024年5月29日
https://dl.acm.org/doi/10.1145/3636534.3649369
显示更多引用者

索引术语

米^三跟踪：基于波的多用户3D姿态跟踪
1. 以人为中心的计算
  1. 无处不在的移动计算

建议

用于5G无线通信的高增益小型阵列天线的设计、仿真与分析
摘要
微带天线由于其低轮廓、低成本和易于在电路板中制造而成为当今无线通信世界的一部分。但性能较差，如带宽窄、功耗低。。。
阅读更多信息
毫米波天线方向图测量中射频探头的影响研究

对射频探头进行了完整建模，提取了该探头在毫米波频率下的辐射方向图和实际增益。仿真结果表明，探头以偶极子形式辐射，实现了增益补偿。。。
阅读更多信息
一种用于5G毫米波通信系统的缝隙接地板MIMO天线
SummerSim'20：2020年夏季模拟会议记录

本文提出了一种用于5G毫米波通信系统的带缝隙接地平面和贴片的四元多输入多输出（MIMO）天线。它是利用计算机仿真技术（CST）软件在罗杰斯RT/Duriod。。。
阅读更多信息

评论

信息和贡献者

问询处

发布于

封面图片ACM会议

MobiSys’22：第20届移动系统、应用程序和服务国际年会会议记录

2022年6月

668页

国际标准图书编号：9781450391856

内政部：10.1145/3498361

一般主席：
尼鲁帕马·布卢苏
波特兰州立大学
,
Ehsan Aryafar公司
波特兰州立大学
,
项目主席：
Aruna Balasubramanian语
石溪大学
,
宋俊华
KAIST公司

版权所有©2022 ACM。

如果复制品不是为了盈利或商业利益而制作或分发的，并且复制品的第一页载有本通知和完整引文，则允许免费制作本作品的全部或部分数字或硬拷贝以供个人或课堂使用。必须尊重ACM以外的其他人对本作品组成部分的版权。允许用信用证进行摘要。要以其他方式复制或重新发布，在服务器上发布或重新发布到列表，需要事先获得特定许可和/或付费。从请求权限[电子邮件保护]

赞助商

出版商

计算机协会

美国纽约州纽约市

出版历史

出版：2022年6月27日

权限

请求对此文章的权限。

检查更新

作者标记

限定符

研究文章

资金来源

国家自然科学基金

会议

MobiSys’22

赞助商：

MobiSys’22：第20届移动系统、应用程序和服务国际年会

2022年6月27日至7月1日

俄勒冈州波特兰市

接受率

总体接受率1679份提交文件中的274份，16%

贡献者

其他指标

查看文章指标

文献计量学和引文

文献计量学

文章指标

20
引文总数
查看引文
1,468
总下载次数

下载量（最近12个月）486
下载次数（最近6周）32

其他指标

查看作者指标

引文

引用人

Bae K公司月亮H金SOkoshi T公司Ko J公司利坎瓦R(2024)SuperSight:mmWave后向散射的Sub-cm非直瞄定位第22届移动系统、应用和服务国际年会会议记录10.1145/3643832.3661857(278-291)在线发布日期：2024年6月3日
https://dl.acm.org/doi/10.1145/3643832.3661857
哈达R阿隆A巴哈拉迪DSakuta M公司Saruwatari S公司Okoshi T公司Ko J公司利坎瓦R(2024)演示：XR应用程序的UWB定位和跟踪第22届移动系统、应用和服务国际年会会议记录10.1145/3643832.3661840(604-605)在线发布日期：2024年6月3日
https://dl.acm.org/doi/10.1145/3643832.3661840
赖H罗G刘毅赵M甘尼桑D史伟(2024)启用射频视觉识别第30届移动计算和网络国际年会会议记录10.1145/3636534.3649369(388-403)在线发布日期：2024年5月29日
https://dl.acm.org/doi/10.1145/3636534.3649369
张D张X谢毅张F王X李毅张D(2024)洛卡尔ACM互动、移动、穿戴和普及技术会议录10.1145/36314367:4(1-27)在线发布日期：2024年1月12日
https://dl.acm.org/doi/10.1145/3631436
曾H李G李·T(2024)PyroSense传感器ACM互动、移动、穿戴和普及技术会议录10.1145/36314357:4(1-32)在线发布日期：2024年1月12日
https://dl.acm.org/doi/10.1145/3631435
李伟刘瑞（Liu R）王S曹D姜伟Eskicioglu R系列黄PPatwari N公司(2023)基于头戴毫米波雷达的自我中心人体姿态估计第21届ACM嵌入式网络传感器系统会议记录10.1145/3625687.3625799(431-444)在线发布日期：2023年11月12日
https://dl.acm.org/doi/10.1145/3625687.3625799
马哈茂德S李凯（Li K）胡G陈H金·R张瑞吉姆布雷蒂埃F张C(2023)PoseSonic公司ACM互动、移动、穿戴和普及技术会议录10.1145/36108957:3(1-28)在线发布日期：2023年9月27日
https://dl.acm.org/doi/10.1145/3610895
刘毅张S戈达·M耐拉库提石S(2023)利用mmWave信号的特性进行交互式物联网应用中的3D手指运动跟踪ACM SIGMETRICS性能评估审查10.1145/3606376.359354951:1(107-108)在线发布日期：2023年6月27日
https://dl.acm.org/doi/10.1145/3606376.3593549
徐X孔H于J(2023)通过毫米波信号实现鲁棒多用户三维姿态跟踪2023年ACM图灵奖庆祝大会会议记录10.1145/3603165.3607428(118-119)在线发布日期：2023年7月28日
https://dl.acm.org/doi/10.1145/3603165.3607428
刘特（Liu T）林F王C徐C张X李Z徐伟黄M任克(2023)WavoID：基于mmWave-voice机制的鲁棒安全多模式用户识别第36届ACM用户界面软件与技术年会论文集10.1145/3586183.3606775(1-15)在线发布日期：2023年10月29日
https://dl.acm.org/doi/10.1145/3586183.3606775
显示更多引用者

视图选项

获取访问权限

登录选项

检查您是否可以通过登录凭据或您的机构访问本文。

完全访问权限

获取此出版物

查看选项

PDF格式

以PDF文件查看或下载。

电子阅读器

使用联机查看电子阅读器.

电子阅读器

媒体

数字

其他

桌子