arXiv reaDer
出力翻訳によるクラスタリングベースの表現学習とリモートセンシング画像への応用
Clustering-Based Representation Learning through Output Translation and Its Application to Remote--Sensing Images
教師ありディープ ラーニングでは、リモート センシング イメージ (RSI) の適切な表現の学習は、手動の注釈に依存しています。しかし、リモートセンシングの分野では、大量のラベル付きデータを取得することは困難です。最近、自己教師あり学習は、画像の表現、特にインスタンス識別の方法を学習する優れた能力を示しています。インスタンス識別の方法を比較すると、クラスタリングベースの方法は、同じ画像の変換を「ポジティブ」サンプルとして表示するだけでなく、類似の画像も表示します。この論文では、表現学習のための新しいクラスタリングベースの方法を提案します。最初に紹介します。表現の弁別性を測定する量であり, この量から, 均一な分布には最も弁別性の高い表現が必要であることを示します. これにより, 画像の均等な分布がうまく機能する理由についての理論的洞察が得られます. . したがって, 我々はニューラルネットワークの出力を変換するアルゴリズムを開発して, 出力の隣接関係を維持しながらサンプルを均等に分配するという目標を達成する. 広範な実験により, 我々の方法が最先端のアプローチ、および私たちの方法がcomを実行することさまざまな RSI データセットで推定効率的かつ堅牢に。
In supervised deep learning, learning good representations for remote--sensing images (RSI) relies on manual annotations. However, in the area of remote sensing, it is hard to obtain huge amounts of labeled data. Recently, self--supervised learning shows its outstanding capability to learn representations of images, especially the methods of instance discrimination. Comparing methods of instance discrimination, clustering--based methods not only view the transformations of the same image as ``positive" samples but also similar images. In this paper, we propose a new clustering-based method for representation learning. We first introduce a quantity to measure representations' discriminativeness and from which we show that even distribution requires the most discriminative representations. This provides a theoretical insight into why evenly distributing the images works well. We notice that only the even distributions that preserve representations' neighborhood relations are desirable. Therefore, we develop an algorithm that translates the outputs of a neural network to achieve the goal of evenly distributing the samples while preserving outputs' neighborhood relations. Extensive experiments have demonstrated that our method can learn representations that are as good as or better than the state of the art approaches, and that our method performs computationally efficiently and robustly on various RSI datasets.
updated: Sun Sep 25 2022 06:38:27 GMT+0000 (UTC)
published: Tue Jul 13 2021 09:39:43 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト