arXiv reaDer
自己管理型 AutoFlow
Self-supervised AutoFlow
最近、AutoFlow は、オプティカル フローのトレーニング セットを学習することで有望な結果を示しましたが、その検索メトリックを計算するには、ターゲット ドメインのグラウンド トゥルース ラベルが必要です。グラウンド トゥルース検索メトリクスと自己教師付き損失との間に強い相関関係があることを観察し、自己教師付き AutoFlow を導入して、グラウンド トゥルース ラベルなしで実世界のビデオを処理します。検索メトリックとして自己教師付き損失を使用することで、当社の自己教師付き AutoFlow は、グラウンド トゥルースが利用可能な Sintel および KITTI の AutoFlow と同等のパフォーマンスを発揮し、現実世界の DAVIS データセットでより優れたパフォーマンスを発揮します。さらに、(半) 教師あり設定で自己教師あり AutoFlow を使用することを検討し、最先端技術に対する競争力のある結果を得ます。
Recently, AutoFlow has shown promising results on learning a training set for optical flow, but requires ground truth labels in the target domain to compute its search metric. Observing a strong correlation between the ground truth search metric and self-supervised losses, we introduce self-supervised AutoFlow to handle real-world videos without ground truth labels. Using self-supervised loss as the search metric, our self-supervised AutoFlow performs on par with AutoFlow on Sintel and KITTI where ground truth is available, and performs better on the real-world DAVIS dataset. We further explore using self-supervised AutoFlow in the (semi-)supervised setting and obtain competitive results against the state of the art.
updated: Sun Dec 04 2022 08:09:12 GMT+0000 (UTC)
published: Sun Dec 04 2022 08:09:12 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト