協力的な知覚は、追加の視点を提供し、感知フィールドを拡大することにより、個人の知覚パフォーマンスを効果的に向上させることができます。既存の連携パラダイムは、解釈可能 (結果連携) または柔軟 (機能連携) のいずれかです。この論文では、解釈可能なインスタンスレベルの柔軟な機能対話を可能にするクエリ連携の概念を提案します。この概念を具体的に説明するために、エージェント間でクエリ ストリームをフローさせる、QUEST と呼ばれる協調的な認識フレームワークを提案します。エージェント間のクエリは、共通認識インスタンスの融合と個々の非認識インスタンスの補完を介して対話されます。カメラベースの車両インフラの認識を典型的な実際の応用シーンとして取り上げ、実世界のデータセット DAIR-V2X-Seq での実験結果は QUEST の有効性を実証し、送信の柔軟性とクエリ連携パラダイムの利点をさらに明らかにしています。パケットドロップアウトに対する堅牢性。私たちは、私たちの取り組みにより、エージェント間の表現のやり取りがさらに促進され、実際の協力的な認識が向上することを願っています。
Cooperative perception can effectively enhance individual perception performance by providing additional viewpoint and expanding the sensing field. Existing cooperation paradigms are either interpretable (result cooperation) or flexible (feature cooperation). In this paper, we propose the concept of query cooperation to enable interpretable instance-level flexible feature interaction. To specifically explain the concept, we propose a cooperative perception framework, termed QUEST, which let query stream flow among agents. The cross-agent queries are interacted via fusion for co-aware instances and complementation for individual unaware instances. Taking camera-based vehicle-infrastructure perception as a typical practical application scene, the experimental results on the real-world dataset, DAIR-V2X-Seq, demonstrate the effectiveness of QUEST and further reveal the advantage of the query cooperation paradigm on transmission flexibility and robustness to packet dropout. We hope our work can further facilitate the cross-agent representation interaction for better cooperative perception in practice.