Suspicious person detection based on expert-vision using deep learning and spatio-temporal modeling of human gait

基于深度学习和人类步态时空建模的专家视觉可疑人员检测

• 批准号: 20K19835
• 负责人: 井元 大輔
• 金额: $ 2.75万
• 依托单位: National Research Institute of Police Science
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Early-Career Scientists
• 财政年份: 2020
• 资助国家: 日本
• 起止时间: 2020-04-01 至 2024-03-31
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-20K19835/
• 关键词: 歩容解析; 法科学; 深層学習; 機械学習; 異常検知; 不審検知

異常検知手法への歩容特徴の活用可能性の検討のため、歩容特徴の基礎研究を継続し、以下の成果が得られた。まず、歩容解析（歩容による人物の異同識別の解析）について、カメラキャリブレーション技術と3次元人体形状データベースに基づく撮影角度の相違への頑健性、及び、フレーム補間技術に基づく低フレームレートへの頑健性の両方を併用可能な歩容解析補助システムの開発を試みた（電子情報通信学会2023年総合大会にて発表）。また、歩容解析においてシルエット品質に依存して判定閾値がずれる基礎的な問題に対し、多数の学習データと該当データとシルエット品質が同一の少数サブセットに基づき、判定閾値を適応的に補正する方法の考案を試みた（SBRA2022にて発表）。また、撮影角度の相違に頑健な歩容解析について、姿勢推定情報を活用したカメラキャリブレーション技術により自動推定された撮影角度に基づき歩容解析を実施する方法を検討し、解析精度を評価した（日本法科学技術学会第28回学術集会にて発表）。また、前年度まで得られた成果について、視体積交差法による他視点映像からの歩行時の3次元人体形状データ作成法を含む画像に基づく法科学分野での幾何解析技術の活用に関する研究、撮影角度900条件に基づく歩容解析に関する研究について論文投稿を行い、それぞれ日本法科学技術学会誌及びJournal of Forensic Science誌に受理された他、深層学習と液晶ペンタブレットを活用したシルエット抽出に関する投稿論文の修正対応を行った。さらに、歩容解析の走行条件への対応の検討のため、上記の3次元人体形状データの作成法に基づき、走行時の3次元人体形状データベースの整備を開始した。

为了检查在异常检测方法中使用步态特征的可能性，继续进行步态特征的基础研究，并获得了以下结果。 First, regarding gait analysis (analysis of differential identification of persons using gait capacity), we have attempted to develop a gait analysis aid system that can combine both camera calibration technology and robustness to differences in shooting angles based on a 3D human body shape database, and robustness to low frame rates based on frame interpolation technology (presented at the 2023 General Conference of the Institute of Electronics, Information and Communication Engineers).此外，在步态分析中，我们试图设计一种基于学习数据的少量子集（与判断性质量相同的质量相同的判断阈值）的方法，以响应基本问题，根据步态分析中的Silhouette质量，判断阈值在SBRA2022中呈现了Silhouette质量。此外，对于对射击角度差异的步态分析，我们研究了一种基于使用摄像机校准技术自动估计的拍摄角度进行步态分析的方法，该方法利用了姿势估计信息，并评估了分析的准确性（在日本法医学学会的第28届学术会议上介绍了分析的准确性）。此外，关于前一年获得的结果，基于图像的几何分析技术在法医学领域中使用的研究，包括使用视觉体积交叉方法从其他角度的图像步行时创建3D人体形状数据的方法，以及基于步态分析的研究，基于拍摄范围的步态分析研究，以及对射击角度进行的研究，以及对静脉科学的杂志，以及对静脉科学的杂志，并分析了杂项，并分析了杂项。使用液晶笔片提取。此外，为了考虑如何处理步态分析中的驾驶条件，我们已经根据上述创建3D人体形状数据的方法开始开发3D人体形状数据库。

项目成果

透視投影モデルに基づく車載・防犯カメラ画像に映る車両の移動距離推定の高精度化 幾何的な制約による複数フレームの活用

基于透视投影模型提高车内/安全摄像头图像中车辆行驶距离估计的准确性由于几何约束而利用多个帧

• 发表时间: 2022
• 作者: 井元大輔;本間正勝;秋葉教充;平林学人;小野塚信太郎;秋田仁也;黒沢健至
• 通讯作者: 黒沢健至

法科学のための歩容解析補助システムの開発

法医学步态分析支持系统开发

• 发表时间: 2023
• 作者: 井元大輔;浅野雅人;本間正勝;黒沢健至
• 通讯作者: 黒沢健至

Pre‐set estimation‐based in‐silico silhouette‐based methodology for improving the robustness to viewing direction difference for assisting forensic gait analysis

基于预设估计的基于计算机轮廓的方法，用于提高观察方向差异的鲁棒性，以辅助法医步态分析

• DOI: 10.1111/1556-4029.15214
• 发表时间: 2023
• 期刊: Journal of Forensic Sciences
• 影响因子: 1.6
• 作者: Imoto Daisuke;Hirabayashi Manato;Honma Masakatsu;Kurosawa Kenji
• 通讯作者: Kurosawa Kenji

3次元カメラ校正に基づく撮影角度に頑健な歩容解析（第3報）

基于 3D 相机校准的对拍摄角度稳健的步态分析（第三份报告）

• 发表时间: 2022
• 作者: 井元大輔;浅野雅人;本間正勝;黒沢健至;吉岡隆宏;紺野剛史;粟井修司
• 通讯作者: 粟井修司

Model-Based Interpolation for Continuous Human Silhouette Images by Height-Constraint Assumption

• DOI: 10.1145/3448823.3448835
• 发表时间: 2020-12
• 期刊: Proceedings of the 2020 4th International Conference on Vision, Image and Signal Processing
• 作者: Daisuke Imoto;K. Kurosawa;M. Honma;Ryo Yokota;Manato Hirabayashi;Yoshinori Hawai