arXiv reaDer
DuMLP-Pin:集合特徴抽出のためのDual-MLP-dot-product順列不変ネットワーク
DuMLP-Pin: A Dual-MLP-dot-product Permutation-invariant Network for Set Feature Extraction
既存の順列不変メソッドは、集約スコープに応じて2つのカテゴリ、つまりグローバル集約とローカル集約に分類できます。 PointNetやディープセットなどのグローバル集計方法はより単純な構造に関与しますが、それらのパフォーマンスは、PointNet ++やPointTransformerなどのローカル集計方法よりも劣ります。単純な構造、競争力のあるパフォーマンス、さらにははるかに少ないパラメーターを備えたグローバルな集計方法が存在するかどうかは、未解決の問題です。この論文では、DuMLP-Pinと呼ばれるデュアルMLPドット積に基づく新しいグローバル集約順列不変ネットワークを提案します。これは、順序付けされていない、または構造化されていないピクセル、属性、ポイントなどのセット入力の特徴を抽出するために使用できます。クラウドデータセット。 DuMLP-Pinによって実装された順列不変関数は、指定された入力セットのカーディナリティがしきい値よりも大きいため、内積法で2つ以上の順列同変関数に分解できることを厳密に証明します。また、DuMLP-Pinは、特定の条件下で強い制約のあるディープセットと見なすことができることも示しています。 DuMLP-Pinのパフォーマンスは、さまざまなデータセットを使用したいくつかの異なるタスクで評価されます。実験結果は、DuMLP-Pinがピクセルセットと属性セットの2つの分類問題で最良の結果を達成することを示しています。点群分類とパーツセグメンテーションの両方で、DuMLP-Pinの精度は、これまでで最高のパフォーマンスを発揮するローカル集計方法に非常に近く、わずか1〜2%の違いがありますが、必要なパラメーターの数は次のように大幅に削減されます。分類で85%以上、セグメンテーションで69%以上。コードはhttps://github.com/JaronTHU/DuMLP-Pinで公開されています。
Existing permutation-invariant methods can be divided into two categories according to the aggregation scope, i.e. global aggregation and local one. Although the global aggregation methods, e. g., PointNet and Deep Sets, get involved in simpler structures, their performance is poorer than the local aggregation ones like PointNet++ and Point Transformer. It remains an open problem whether there exists a global aggregation method with a simple structure, competitive performance, and even much fewer parameters. In this paper, we propose a novel global aggregation permutation-invariant network based on dual MLP dot-product, called DuMLP-Pin, which is capable of being employed to extract features for set inputs, including unordered or unstructured pixel, attribute, and point cloud data sets. We strictly prove that any permutation-invariant function implemented by DuMLP-Pin can be decomposed into two or more permutation-equivariant ones in a dot-product way as the cardinality of the given input set is greater than a threshold. We also show that the DuMLP-Pin can be viewed as Deep Sets with strong constraints under certain conditions. The performance of DuMLP-Pin is evaluated on several different tasks with diverse data sets. The experimental results demonstrate that our DuMLP-Pin achieves the best results on the two classification problems for pixel sets and attribute sets. On both the point cloud classification and the part segmentation, the accuracy of DuMLP-Pin is very close to the so-far best-performing local aggregation method with only a 1-2% difference, while the number of required parameters is significantly reduced by more than 85% in classification and 69% in segmentation, respectively. The code is publicly available on https://github.com/JaronTHU/DuMLP-Pin.
updated: Wed Aug 31 2022 03:43:28 GMT+0000 (UTC)
published: Tue Mar 08 2022 11:01:41 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト