多様な環境に適用可能なコンピュータビジョンと無線通信のクロスモーダルセンシング

适用于多种环境的计算机视觉和无线通信的跨模态传感

基本信息

批准号：
22H03575
负责人：
西尾理志
金额：
$ 10.98万
依托单位：
Tokyo Institute of Technology
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research (B)
财政年份：
2022
资助国家：
日本
起止时间：
2022-04-01 至 2026-03-31
项目状态：
未结题

项目摘要

2022年度は、無線通信に起因する不確実性の課題を解消し、様々な無線通信環境をイメージング可能な機械学習モデルを獲得する手法を確立するため、無線通信信号情報から推定対象領域のイメージングに寄与する情報を選択・抽出する方法、ならびに、無線通信信号情報から推定対象領域のイメージングを行う手法を検討した。一般的に機械学習では、入力情報を増やすことは精度向上につながる一方、推論結果に寄与しない特徴量はノイズとなり性能を低下させる要因となる他、入力次元数の増加は訓練に必要なデータ量を増加させる。本研究では機械学習による無線センシングにおいても上記の事象が発生することを実験的に示した。具体的には、無線センシング端末が多数設置された環境において、無線センシング端末を選択的に用いることで無線センシング精度が向上できることを示した。加えて、PCA等の次元圧縮手法を無線信号に適用することで、予測精度を高めることができることを示した。これらの知見をもとに無線信号と環境に関する断片的画像から観測対象環境全体をイメージングする手法を確立した。特に、カメラによる監視において、カメラ画像に大きな死角や欠損が生じた場合において、欠損箇所の正確な画像情報を無線信号を元に復元するRF-Inpainting技術を提案し、その有効性を実験的に示した。

在2022财年中，为了消除无线通信引起的不确定性问题，并建立了一种获取机器学习模型的方法，可以对各种无线通信环境进行映像，我们检查了选择和提取信息的方法，从而从无线通信信号信息以及从无线通信信息中成像估计的目标区域的估计目标区域的成像，以及从无线电信号信息中进行成像。通常，在机器学习中，增加输入信息的数量会提高准确性，而不影响推理结果的特征数量会变成噪声，并导致性能恶化，同时增加输入维度的数量会增加训练所需的数据量。这项研究在实验上表明，上述事件也发生在使用机器学习的无线传感中。具体而言，已经表明，在安装大量无线传感终端的环境中，选择性使用无线传感终端可以提高无线传感精度。此外，已经表明，通过将尺寸压缩技术（例如PCA）应用于无线电信号，可以提高预测精度。基于这些发现，我们建立了一种方法，可以从无线电信号和环境的零碎图像中观察到整个环境。特别是，当通过相机监视摄像头时，我们提出了一种基于无线电信号恢复缺失零件的准确图像信息，并通过实验证明其有效性。

项目成果

期刊论文数量（9）

专著数量（0）

科研奖励数量（0）

会议论文数量（0）

专利数量（0）

RF-Inpainter: Multimodal Image Inpainting Based on Vision and Radio Signals

DOI：
10.1109/access.2022.3214972
发表时间：
2022
期刊：
IEEE Access
影响因子：
3.9
作者：
Cheng Chen;T. Nishio;M. Bennis;Jihong Park
通讯作者：
Cheng Chen;T. Nishio;M. Bennis;Jihong Park

カメラを用いた人物位置検出のCSIセンシングへの移行に関する実験的な検討

摄像头人体位置检测向CSI传感过渡的实验研究

DOI：
发表时间：
2023
期刊：
影响因子：
0
作者：
小寺奏怜;太田翔己;西尾理志
通讯作者：
西尾理志

Deakin University(オーストラリア)

迪肯大学（澳大利亚）

DOI：
发表时间：
期刊：
影响因子：
0
作者：
通讯作者：

Vision-Aided Frame-Capture-Based CSI Recomposition for WiFi Sensing: A Multimodal Approach

用于 WiFi 传感的基于视觉辅助帧捕获的 CSI 重组：一种多模态方法

DOI：
10.1109/ccnc51644.2023.10060680
发表时间：
2023
期刊：
Proc. the 20th IEEE Annual Consumer Communications & Networking Conference (CCNC 2023)
影响因子：
0
作者：
Shimomura Hiroki;Koda Yusuke;Kanda Takamochi;Yamamoto Koji;Nishio Takayuki;Taya Akihito
通讯作者：
Taya Akihito

ビームフォーミングフィードバックを用いた見通し判定の検討

利用波束形成反馈确定视线的研究