arXiv reaDer
HandsOff: 追加のヒューマン アノテーションを使用しないラベル付きデータセットの生成
HandsOff: Labeled Dataset Generation With No Additional Human Annotations
最近の研究では、敵対的生成ネットワーク (GAN) の表現力を活用して、ラベル付きの合成データセットを生成しています。これらのデータセット生成方法では、多くの場合、合成画像の新しい注釈が必要になるため、実務者は注釈者を探し、一連の合成画像をキュレートし、生成されたラベルの品質を確保する必要があります。 HandsOff フレームワークを導入します。これは、50 未満の既存のラベル付き画像でトレーニングした後、無制限の数の合成画像と対応するラベルを生成できる手法です。私たちのフレームワークは、GAN反転の分野をデータセット生成と統合することにより、以前の研究の実際的な欠点を回避します。顔、車、全身の人間のポーズ、都市の運転シーンなど、複数の困難なドメインで豊富なピクセル単位のラベルを使用してデータセットを生成します。私たちの方法は、以前のデータセット生成アプローチや転移学習ベースラインと比較して、セマンティック セグメンテーション、キーポイント検出、深度推定において最先端のパフォーマンスを実現します。さらに、セマンティック セグメンテーションのロングテール問題など、固定された手作業で注釈が付けられたデータセットに起因するモデル開発における幅広い課題に対処する能力を紹介します。プロジェクト ページ: austinxu87.github.io/handsoff。
Recent work leverages the expressive power of generative adversarial networks (GANs) to generate labeled synthetic datasets. These dataset generation methods often require new annotations of synthetic images, which forces practitioners to seek out annotators, curate a set of synthetic images, and ensure the quality of generated labels. We introduce the HandsOff framework, a technique capable of producing an unlimited number of synthetic images and corresponding labels after being trained on less than 50 pre-existing labeled images. Our framework avoids the practical drawbacks of prior work by unifying the field of GAN inversion with dataset generation. We generate datasets with rich pixel-wise labels in multiple challenging domains such as faces, cars, full-body human poses, and urban driving scenes. Our method achieves state-of-the-art performance in semantic segmentation, keypoint detection, and depth estimation compared to prior dataset generation approaches and transfer learning baselines. We additionally showcase its ability to address broad challenges in model development which stem from fixed, hand-annotated datasets, such as the long-tail problem in semantic segmentation. Project page: austinxu87.github.io/handsoff.
updated: Thu Mar 30 2023 19:38:05 GMT+0000 (UTC)
published: Sat Dec 24 2022 03:37:02 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト