arXiv reaDer
Efficient Solvers for Sparse Subspace Clustering
 スパース部分空間クラスタリング(SSC)は、低次元部分空間の結合の近くにあるn点をクラスター化します。 SSCモデルは、point_1またはℓ_0正則化のいずれかを使用して、各ポイントを他のポイントの線形またはアフィンの組み合わせとして表します。 ℓ_1正則化を使用すると、凸問題が発生しますが、O(n ^ 2)ストレージが必要であり、通常、O(n ^ 3)フロップを取る乗算器の交互方向法によって解決されます。 ℓ_0モデルは非凸ですが、nの線形メモリのみが必要であり、直交マッチングの追求によって解決され、アフィン部分空間のケースを処理できません。この論文は、近位勾配フレームワークがSSCを解き、ℓ_1モデルとℓ_0モデルの両方、および線形制約とアフィン制約の両方をカバーできることを示しています。 SC_1とℓ_0の両方について、アフィン制約が存在する場合に近接演算子を計算するアルゴリズムはSSCの文献に提示されていないため、O(n ^ 2)フロップだけでℓ_1のケースを解決する正確かつ効率的なアルゴリズムを導き出します。 ℓ_0の場合、このアルゴリズムは低メモリオーバーヘッドを保持し、アフィン制約を使用してSSC-ℓ_0モデルを解決する最初のアルゴリズムです。実験により、アルゴリズムは敏感な正則化パラメーターに依存せず、スパース性の誤指定や高ノイズの影響を受けにくいことが示されています。
Sparse subspace clustering (SSC) clusters n points that lie near a union of low-dimensional subspaces. The SSC model expresses each point as a linear or affine combination of the other points, using either ℓ_1 or ℓ_0 regularization. Using ℓ_1 regularization results in a convex problem but requires O(n^2) storage, and is typically solved by the alternating direction method of multipliers which takes O(n^3) flops. The ℓ_0 model is non-convex but only needs memory linear in n, and is solved via orthogonal matching pursuit and cannot handle the case of affine subspaces. This paper shows that a proximal gradient framework can solve SSC, covering both ℓ_1 and ℓ_0 models, and both linear and affine constraints. For both ℓ_1 and ℓ_0, algorithms to compute the proximity operator in the presence of affine constraints have not been presented in the SSC literature, so we derive an exact and efficient algorithm that solves the ℓ_1 case with just O(n^2) flops. In the ℓ_0 case, our algorithm retains the low-memory overhead, and is the first algorithm to solve the SSC-ℓ_0 model with affine constraints. Experiments show our algorithms do not rely on sensitive regularization parameters, and they are less sensitive to sparsity misspecification and high noise.
updated: Thu Feb 20 2020 03:19:41 GMT+0000 (UTC)
published: Tue Apr 17 2018 14:41:52 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト