Mech-DLK-スマートラベル付け機能によるラベル付けの効率向上

概要

ロボットガイドプロジェクトでは、データラベル付けには時間がかかる場合があります。Mech-DLKのスマートラベル付け機能(スマートラベル付けツール、事前ラベル付けツール、スーパーモデルラベル付けツール)を使用すれば効率を大幅に向上されます。ここで使用方法や注意事項などを説明していきます(インスタンスセグメンテーションと対象物検出モジュールに適用)。

(本文では Mech-DLK 252 を使用して説明します)

1.スマートラベル付けツール

1.1 機能
より簡単にラベル付けできます。
cb5f409fea8dcecd6f8702f4853806176e6e4ab4

1.2使用手順
①「スマートラベル付けツール」アイコンを右クリックして「スマートラベル付けツール」を選択します。この機能を初めて使用する時にはプロンプトウィンドウが表示され、クラスと色が設定できます。この手順は時間がかかる場合があります。

②対象物をラベル付けして調整します。
③「適用」ボタンをクリックするか「Enter」キーを押して適用します。

2.事前ラベル付けツール

2.1機能
より効率的にラベル付けできます。
ただ、これを使用するには、事前にモデルをトレーニング・検証する必要があります。事前ラベル付けツールは、手動で付けたラベルがないデータにしか使用できません。手動で付けられたラベルがあるデータにたいしては、それらのラベルをクリアしておいてください。
2.2使用手順
①「事前ラベル付け」ボタンをクリックしてラベル付けを一括実行します。1枚、複数枚の画像を処理したい場合は、画像を選択してから「スマートラベル付けツール」アイコンの右クリックメニューの「事前ラベル付けツール」を選択します。

②「ラベル付けを開始」ボタンをクリックします。

2.3注意
ラベル付けの精度はモデルの精度にかかわります。精度の高いモデルをトレーニングしてから事前ラベル付けツールを使用することを推奨します。

3.スーパーモデルラベル付けツール

3.1機能
大幅に効率改善が可能です。スマートラベル付けと事前ラベル付けよりも効果的です。スーパーモデルラベル付け機能を使用した後、ラベル付けデータの正確性を手動で確認すればいいです。

3.2使用手順
「スーパーモデルラベル付け」ボタンをクリックして一括ラベル付けします。1枚または複数枚の画像を処理したい場合は画像を選択してから「スマートラベル付けツール」アイコンの右クリックメニューの「スーパーモデルラベル付けツール」を選択します。

3.3注意
この方法は、少し時間かかります。初めて使用する時に読み込みにも時間がかかるので少々お待ちください。
使用するコンピュータのグラフィックカードメモリは6GB以上である必要があります。

4.Mech-VisionでMaskからLabelに変換する(スクリプト)

以上のMech-DLK組み入れツールに加え、Mech-VisionでMaskからLabelに変換することでもラベル付けの効率向上を実現できます。
4.1適用シーン
マッチングの効果がいいが認識のミスが発生した場合、またマッチングだけで対象物点群とシーンの点群を識別できない場合に使用できます。
4.2使用手順
①Mech-Visionでの操作
スクリプトをプロジェクトのパスに保存します。
Mech-Visionでは、「Pythonを使用して結果を計算」ステップのパラメータを以下のように設定します。
入力データはそれぞれ:
1:カメラ深度画像。
2:カメラカラー画像。
3:対象物マスク

対象物マスクは、対象物の点群を2D画像に投影して生成されます。マッチングにSTLモデルを使用した場合に、出力された点群をそのまま使用して2D画像に投影すればいいです。
STLによって生成された点群または完全な物体点群を修正しなければならない場合に、以下の方法で2D画像に変換します。テンプレート点群と読み取られた点群の関係に注意が必要です。テンプレート点群は読み取られた点群を編集した後取得したものです。
②Mech-DLKへのインポート
マスクと2D画像を取得してからMech-DLKにインポートするします。
データ保存フォルダを開き、「label」にあるファイルを全部「color」フォルダにコピーします。
それから、ファイルの数を確認してください。JPGファイルとXMLファイルの数が一致しないとインポートできないので必ずチェックしてください。
Mech-DLKでプロジェクト新規作成してフォルダをインポートします。
4.3注意
マッチングの精度が大事です。データをインポートした後は手動でチェックし、異常や漏れなどがあれば修正してください。

関連ファイル
MaskからLabelへ変換するスクリプト:
scripts.7z (4.4 KB)