arXiv reaDer
ビデオ オブジェクト セグメンテーションのためのピクセル レベルの等化マッチング
Pixel-Level Equalized Matching for Video Object Segmentation
参照フレームの情報をクエリ フレームに転送する機能類似性マッチングは、半教師付きビデオ オブジェクト セグメンテーションの重要なコンポーネントです。全射一致が採用されている場合、背景の注意散漫が発生しやすくなり、パフォーマンスが低下する可能性があります。全単射マッチング メカニズムは、クエリ フレームに転送される情報の量を制限することでこれを防止しようとしますが、次の 2 つの制限があります。 2) 最適なハイパーパラメーターを検索するには、テスト時の手動チューニングが必要です。信頼性の高い情報転送を確保しながらこれらの制限を克服するために、等化されたマッチング メカニズムを導入します。参照フレーム情報が過度に参照されるのを防ぐために、クエリ フレームへの潜在的な寄与は、クエリと共にソフトマックス操作を適用するだけで均等化されます。パブリック ベンチマーク データセットでは、提案されたアプローチは、最先端の方法に匹敵するパフォーマンスを達成します。
Feature similarity matching, which transfers the information of the reference frame to the query frame, is a key component in semi-supervised video object segmentation. If surjective matching is adopted, background distractors can easily occur and degrade the performance. Bijective matching mechanisms try to prevent this by restricting the amount of information being transferred to the query frame, but have two limitations: 1) surjective matching cannot be fully leveraged as it is transformed to bijective matching at test time; and 2) test-time manual tuning is required for searching the optimal hyper-parameters. To overcome these limitations while ensuring reliable information transfer, we introduce an equalized matching mechanism. To prevent the reference frame information from being overly referenced, the potential contribution to the query frame is equalized by simply applying a softmax operation along with the query. On public benchmark datasets, our proposed approach achieves a comparable performance to state-of-the-art methods.
updated: Wed Feb 01 2023 05:44:42 GMT+0000 (UTC)
published: Sun Sep 04 2022 18:01:09 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト