arXiv reaDer
PASS:人間を使わない自己教師あり事前トレーニングのImageNet代替品
PASS: An ImageNet replacement for self-supervised pretraining without humans
コンピュータビジョンは、モデルの事前トレーニングのために、インターネットからサンプリングされたImageNetやその他の大規模な画像データセットに長い間依存してきました。ただし、これらのデータセットには、同意なしに取得された個人情報、不明確なライセンスの使用、偏見、場合によっては問題のある画像コンテンツが含まれるなど、倫理的および技術的な欠点があります。一方、最先端の事前トレーニングは、現在、教師なし方法で取得されています。つまり、ImageNetなどのラベル付きデータセットは、モデルの事前トレーニングに必要ではないか、おそらく最適ではない可能性があります。したがって、ラベルのないデータセットPASS:自己監視のためのhumAnsのない画像を提案します。 PASSには、著作権の問題に対処するために、CC-BYライセンスと完全なアトリビューションメタデータを含む画像のみが含まれています。最も重要なことは、人の画像がまったく含まれておらず、データ保護や倫理に問題のある他の種類の画像も回避していることです。 PASSは、MoCo-v2、SwAV、DINOなどの方法で事前トレーニングに使用できることを示しています。転移学習の設定では、人間の姿勢の推定など、人間が関与するタスクでも、ImageNetの事前トレーニングと同様のダウンストリームパフォーマンスが得られます。 PASSは、既存のデータセットを廃止することはありません。たとえば、ベンチマークには不十分です。ただし、より安全なデータを使用しながらモデルの事前トレーニングが可能であることが多く、事前トレーニング方法のより堅牢な評価の基礎を提供することも示しています。
Computer vision has long relied on ImageNet and other large datasets of images sampled from the Internet for pretraining models. However, these datasets have ethical and technical shortcomings, such as containing personal information taken without consent, unclear license usage, biases, and, in some cases, even problematic image content. On the other hand, state-of-the-art pretraining is nowadays obtained with unsupervised methods, meaning that labelled datasets such as ImageNet may not be necessary, or perhaps not even optimal, for model pretraining. We thus propose an unlabelled dataset PASS: Pictures without humAns for Self-Supervision. PASS only contains images with CC-BY license and complete attribution metadata, addressing the copyright issue. Most importantly, it contains no images of people at all, and also avoids other types of images that are problematic for data protection or ethics. We show that PASS can be used for pretraining with methods such as MoCo-v2, SwAV and DINO. In the transfer learning setting, it yields similar downstream performances to ImageNet pretraining even on tasks that involve humans, such as human pose estimation. PASS does not make existing datasets obsolete, as for instance it is insufficient for benchmarking. However, it shows that model pretraining is often possible while using safer data, and it also provides the basis for a more robust evaluation of pretraining methods.
updated: Mon Sep 27 2021 17:59:39 GMT+0000 (UTC)
published: Mon Sep 27 2021 17:59:39 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト