arXiv reaDer
高次元の鋭い次元削減を使用した視覚的クラスター分離
Visual Cluster Separation Using High-Dimensional Sharpened Dimensionality Reduction
探索的分析のために2D投影で基礎となる高次元データクラスターを区別する場合、大規模な高次元データセットに次元削減(DR)を適用することは困難な場合があります。 Local Gradient Clustering(LGC)を使用してDRステップの前に、最初に元の高次元データのクラスターをシャープにすることで、この問題に対処します。次に、ユーザーが選択したDRメソッドを使用して、シャープ化されたデータを高次元空間から2Dに投影します。シャープニングステップは、この方法が結果の2D投影でクラスター分離を維持するのに役立ちます。私たちの方法では、エンドユーザーはそれぞれの個別のクラスターにラベルを付けて、他の方法ではラベル付けされていないデータセットをさらに分析できます。合成データセットと実世界のデータセットの両方でテストされた「高次元シャープ化DR」(HD-SDR)メソッドは、クラスター分離が不十分なDRメソッドに有利であり、シャープニングなしのこれらのDRメソッドよりも優れた視覚的クラスター分離を実現します。私たちの方法は、(品質メトリックによって測定される)優れた品質を達成し、大規模な高次元データで計算上適切にスケーリングします。その具体的なアプリケーションを説明するために、最近の天体カタログにHD-SDRをさらに適用します。
Applying dimensionality reduction (DR) to large, high-dimensional data sets can be challenging when distinguishing the underlying high-dimensional data clusters in a 2D projection for exploratory analysis. We address this problem by first sharpening the clusters in the original high-dimensional data prior to the DR step using Local Gradient Clustering (LGC). We then project the sharpened data from the high-dimensional space to 2D by a user-selected DR method. The sharpening step aids this method to preserve cluster separation in the resulting 2D projection. With our method, end-users can label each distinct cluster to further analyze an otherwise unlabeled data set. Our `High-Dimensional Sharpened DR' (HD-SDR) method, tested on both synthetic and real-world data sets, is favorable to DR methods with poor cluster separation and yields a better visual cluster separation than these DR methods with no sharpening. Our method achieves good quality (measured by quality metrics) and scales computationally well with large high-dimensional data. To illustrate its concrete applications, we further apply HD-SDR on a recent astronomical catalog.
updated: Wed Feb 23 2022 17:21:33 GMT+0000 (UTC)
published: Fri Oct 01 2021 11:13:51 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト