少数ショット学習におけるテスト時間のタスク適応は、事前にトレーニングされたタスクに依存しないモデルを適応させて、テスト タスクのタスク固有の知識を取得することを目的としており、少数のラベル付きサポート サンプルのみに依存しています。以前のアプローチでは、一般に、目的を達成するための高度なアルゴリズムの開発に重点が置かれ、特定のサポート サンプルに固有の問題は無視されていました。実際、ほんの一握りのサンプルしか利用できないため、サポート サンプルからのイメージ ノイズ (別名 X ノイズ) またはラベル ノイズ (別名 Y ノイズ) の悪影響が大幅に増幅される可能性があります。この課題に対処するために、この作業では、既存のタスク適応アプローチに直交する最初の統合された画像とラベルのノイズ除去フレームワークである DEnoised Task Adaptation (DETA) を提案します。特別な監視なしで、DETA は、グローバルな視覚情報とサポート サンプルのローカル領域の詳細の両方を利用して、タスクに関係のない、ノイズの多い表現を除外します。困難なメタデータセットでは、DETA はさまざまな事前トレーニング済みモデルに適用される幅広いベースライン メソッドのパフォーマンスを一貫して向上させます。特に、Meta-Dataset で見落とされていた画像ノイズに取り組むことにより、DETA は新しい最先端の結果を確立します。コードは https://github.com/nobody-1617/DETA で公開されています。
Test-time task adaptation in few-shot learning aims to adapt a pre-trained task-agnostic model for capturing taskspecific knowledge of the test task, rely only on few-labeled support samples. Previous approaches generally focus on developing advanced algorithms to achieve the goal, while neglecting the inherent problems of the given support samples. In fact, with only a handful of samples available, the adverse effect of either the image noise (a.k.a. X-noise) or the label noise (a.k.a. Y-noise) from support samples can be severely amplified. To address this challenge, in this work we propose DEnoised Task Adaptation (DETA), a first, unified image- and label-denoising framework orthogonal to existing task adaptation approaches. Without extra supervision, DETA filters out task-irrelevant, noisy representations by taking advantage of both global visual information and local region details of support samples. On the challenging Meta-Dataset, DETA consistently improves the performance of a broad spectrum of baseline methods applied on various pre-trained models. Notably, by tackling the overlooked image noise in Meta-Dataset, DETA establishes new state-of-the-art results. Code is released at https://github.com/nobody-1617/DETA.