arXiv reaDer
Bootstrap The Original Latent: バックプロパゲーテッド ブラック ボックス適応のための凍結解凍アダプター
Bootstrap The Original Latent: Freeze-and-thaw Adapter for Back-Propagated Black-Box Adaptation
このホワイト ペーパーでは、モデル所有者のデータ/モデル プライバシーとユーザー ニーズのバランスを考慮して、バック プロパゲーテッド ブラック ボックス アダプテーション (BPBA) と呼ばれる新しい設定を提案し、ユーザーがバックのガイダンスを介してプライベート モデルをより適切にトレーニングできるようにします。基盤/ソース モデルの伝播結果。私たちの設定は、基盤/ソース モデルの使用を容易にするだけでなく、基盤/ソース モデルの漏洩と誤用を防ぐことができます。さらに、Bootstrap The Original Latent (BTOL) と呼ばれる新しいトレーニング戦略を提案して、基礎/ソース モデルを十分に活用します。私たちの戦略は、ドメイン アダプターと凍結融解戦略で構成されています。 3 つの異なるデータセットの BPBA およびブラックボックス UDA 設定で BTOL を適用します。実験は、私たちの戦略が手動の拡張なしでさまざまな設定で効率的かつ堅牢であることを示しています。
In this paper, considering the balance of data/model privacy of model owners and user needs, we propose a new setting called Back-Propagated Black-Box Adaptation (BPBA) for users to better train their private models via the guidance of the back-propagated results of foundation/source models. Our setting can ease the usage of foundation/source models as well as prevent the leakage and misuse of foundation/source models. Moreover, we also propose a new training strategy called Bootstrap The Original Latent (BTOL) to fully utilize the foundation/source models. Our strategy consists of a domain adapter and a freeze-and-thaw strategy. We apply our BTOL under BPBA and Black-box UDA settings on three different datasets. Experiments show that our strategy is efficient and robust in various settings without manual augmentations.
updated: Tue Mar 07 2023 07:47:41 GMT+0000 (UTC)
published: Tue Mar 07 2023 07:47:41 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト