固定の計算コストと最先端のパフォーマンスを備えた3D画像のオブジェクトトラッキング方法を示します。以前の方法では、畳み込み層から変換パラメーターを予測していました。代わりに、畳み込み特徴の平坦化または完全に接続されたレイヤーのいずれも含まないアーキテクチャを提案しますが、代わりに、入力と出力の間の変換を保持するために同変フィルターに依存します(たとえば、入力の回転/変換出力の回転/変換)。次に、変換は、フィルターの出力から閉じた形式で導出されます。この方法は、リアルタイムトラッキングなど、低レイテンシを必要とするアプリケーションに役立ちます。合成的に増強された成人の脳MRIと、意図されたユースケースである胎児の脳MRIでモデルを示します。
We demonstrate an object tracking method for 3D images with fixed computational cost and state-of-the-art performance. Previous methods predicted transformation parameters from convolutional layers. We instead propose an architecture that does not include either flattening of convolutional features or fully connected layers, but instead relies on equivariant filters to preserve transformations between inputs and outputs (e.g. rot./trans. of inputs rotate/translate outputs). The transformation is then derived in closed form from the outputs of the filters. This method is useful for applications requiring low latency, such as real-time tracking. We demonstrate our model on synthetically augmented adult brain MRI, as well as fetal brain MRI, which is the intended use-case.