Neural network trained on simulation predicts scan-to-scan localizability from raw LiDAR data before registration.

技術屬性

欄位內容為文獻擷取紀錄的原文用語(英文),以原文為據;「未查證」表示本研究尚未讀到該資訊,不代表該方法不具備此能力。

Learning-based localizability 的技術屬性
感測輸入3D LiDAR (Velodyne VLP-16; Ouster OS0-128 for sensor-transfer test)
原文測試平台legged (ANYmal C)、simulation
狀態估計sparse 3D convolutional ResUNet feature extractor (MinkowskiEngine; 4000 sampled points, 0.2 m voxels) with global max pooling and a 5-layer MLP giving six sigmoid outputs; multi-label binary classification of localizability along x, y, z, roll, pitch and yaw trained with binary cross-entropy; per-direction probability thresholds chosen from a validation precision-recall curve
資料關聯不適用 (prediction before registration)
時間表示不適用
去畸變原文未報告
迴圈閉合不適用
全域最佳化none
地圖表示不適用
先驗資訊trained only on simulated scans from 15 environments (CAD meshes and meshed cave scans) rendered in Gazebo with a simulated VLP-16; labels from Monte Carlo sampling of 200 child scans registered by point-to-plane ICP and thresholded at 0.1 m and 2 deg
可輸出幾何不適用
計算需求inference 28 ms per scan on CPU (Intel i7 10700F) and 13 ms on an Nvidia RTX3070 GPU in a ROS node without code optimization; training about 4 h on an Nvidia RTX3090

使用設備

原文使用的感測器、運算硬體與載具(equipment)。型號保留原文寫法,連結到設備頁中同一型號的歸併名稱;角色依原文用途分為方法輸入、資料集感測器、執行運算平台、參考或真值量測(reference or ground truth)與比較對象設備。

原文使用的設備
類別型號(原文寫法)角色資料集原文規格出處
LiDARVelodyne VLP-16方法輸入未標示16 beams, 30 deg vertical field of view; its simulated model generated all training scans in Gazebo(Nubert et al., 2022b, Sec. V-A2, VI-B, VI-C)
LiDAROuster OS0-128方法輸入未標示128 beams, 90 deg vertical field of view; unseen in training, used for the generalization test(Nubert et al., 2022b, Sec. VI-C)
地面雷射掃描儀(TLS)Leica RTC360參考或真值量測未標示used with the BLK2GO to record the ground-truth map of the mine tunnel(Nubert et al., 2022b, Sec. VI-A)
行動掃描設備Leica BLK2GO參考或真值量測未標示used with the RTC360 to record the ground-truth map of the mine tunnel(Nubert et al., 2022b, Sec. VI-A)
載具平台ANYmal-C方法輸入未標示quadrupedal robot; kinematic leg odometry fused in CompSLAM along non-localizable directions(Nubert et al., 2022b, Sec. I, VI-B)
運算硬體Nvidia RTX3090歸入:NVIDIA RTX 3090執行運算平台未標示training in about 4 h(Nubert et al., 2022b, Sec. V-B)
運算硬體Intel i7 10700F執行運算平台未標示CPU-only inference 28 ms(Nubert et al., 2022b, Sec. V-B)
運算硬體Nvidia RTX3070執行運算平台未標示GPU inference 13 ms(Nubert et al., 2022b, Sec. V-B)

作者報告的優勢與限制

優勢

限制

營建工程相關證據

現地測試之一在瑞士 Rümlang,原文先稱其為鋪面工作場址(paved work site)上的開闊場地,後又稱為工作場址旁的開闊場地;機器人由棚架下出發,走上周圍沒有幾何特徵的大片混凝土地面,掃描對掃描配準在 x、y 與偏航方向退化。原文未稱其為施工中工地,因此不歸類為 real_construction_site。另兩處為 Seemühle 礦坑隧道,以及 ETH 兼含室內空間與屋頂露台的辦公室環境(arXiv v2 的 Sec. VI-B)。

原文驗證環境:模擬、地下或隧道、已完工建築

報告的性能數據

以下是原文作者報告的性能數值(author-reported results),不是本研究重新量測的結果。每張圖只並列同一個比較組(comparison group,同一張表、同一組實驗設定)內的方法;不同比較組之間的數值不可直接比較,也不構成排名。

本方法共出現在 2 個比較組,合計 14 筆紀錄。

Nubert et al., 2022b · Table IV 本方法 12 筆

表格設定(擷取紀錄原文):Localizability classification averaged over six dimensions; both networks trained 60 epochs on the same simulated splits; test set simulated from the tunnel ground-truth mesh (Nubert et al., 2022b, Table IV)

Accuracy,simulated localizability dataset · Train

只並列這張表在相同設定下報告的方法;以「本方法:」開頭者為本頁方法。失敗、未執行與未報告以標記呈現,不是 0。

按 Tab 進入圖表後,用上下方向鍵逐一瀏覽各類別,Esc 關閉提示框;也可開啟表格檢視閱讀全部數值。

這些是 Nubert et al., 2022b 在此表設定下報告的數值(author-reported results),只能在同一個比較組內對照,不代表方法在其他資料或設定下的表現。

統計量:平均值(mean);對齊方式:未對齊;單位:fraction;場景:simulation

資料來源作者報告值(Nubert et al., 2022b, Table IV)

數值與出處
方法(原文寫法)報告值出處
ResUNet (proposed)本方法原文提出0.998 fraction(Nubert et al., 2022b, Table IV)
PointNet0.957 fraction(Nubert et al., 2022b, Table IV)

Nubert et al., 2022b · Text Sec. V-B 本方法 2 筆

指標inference time

資料集與序列不適用 · per scan

表格設定(擷取紀錄原文):Inference time of the PyTorch model inside a ROS node, no specific code optimization (Nubert et al., 2022b, Text Sec. V-B)

inference time,不適用 · per scan

只並列這張表在相同設定下報告的方法;以「本方法:」開頭者為本頁方法。失敗、未執行與未報告以標記呈現,不是 0。

按 Tab 進入圖表後,用上下方向鍵逐一瀏覽各類別,Esc 關閉提示框;也可開啟表格檢視閱讀全部數值。

這些是 Nubert et al., 2022b 在此表設定下報告的數值(author-reported results),只能在同一個比較組內對照,不代表方法在其他資料或設定下的表現。

統計量:原文未報告;對齊方式:未對齊;單位:ms

資料來源作者報告值(Nubert et al., 2022b, Text Sec. V-B)

數值與出處
方法(原文寫法)報告值出處
ResUNet (proposed), CPU-only本方法原文提出硬體:Intel i7 10700F (CPU only)28 ms(Nubert et al., 2022b, Sec. V-B)
ResUNet (proposed), GPU本方法原文提出硬體:Nvidia RTX307013 ms(Nubert et al., 2022b, Sec. V-B)

來源

  • Nubert et al., 2022b

    Julian Nubert, Etienne Walther, Shehryar Khattak, Marco Hutter(2022)Learning-based Localizability Estimation for Robust LiDAR Localization2022 IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS), pp. 17-24

    同儕審查已出版已讀全文近十年查證後修正

回到方法圖鑑

選擇開啟Esc關閉