arXiv reaDer
分布外の一般化のためのトリックの袋
Bag of Tricks for Out-of-Distribution Generalization
最近、分布外 (OOD) 汎化は、ディープ ラーニング ベースのモデルの堅牢性と汎化能力に注目を集めており、それに応じて、この問題に関連するさまざまな側面に対処するために多くの戦略が立てられています。ただし、OOD の一般化のための既存のアルゴリズムのほとんどは複雑で、特定のデータセット用に特別に設計されています。この問題を軽減するために、nicochallenge-2022 は、多様なコンテキスト情報を持つ大規模なデータセットである NICO++ を提供します。この論文では、NICO++ データセットのさまざまなスキームの体系的な分析に基づいて、多目的フレームワークの設計、データ拡張、トレーニング、および推論戦略を含む、さまざまなトリックを組み合わせたシンプルで効果的な学習フレームワークを提案します。当社のアルゴリズムはメモリ効率が高く、簡単に装備でき、複雑なモジュールを使用せず、大規模な事前トレーニング済みモデルを必要としません。パブリック テスト セットで 88.16%、プライベート テスト セットで 75.65% のトップ 1 精度で優れたパフォーマンスを達成し、nicochallenge-2022 のドメイン一般化タスクで 1 位にランクされています。
Recently, out-of-distribution (OOD) generalization has attracted attention to the robustness and generalization ability of deep learning based models, and accordingly, many strategies have been made to address different aspects related to this issue. However, most existing algorithms for OOD generalization are complicated and specifically designed for certain dataset. To alleviate this problem, nicochallenge-2022 provides NICO++, a large-scale dataset with diverse context information. In this paper, based on systematic analysis of different schemes on NICO++ dataset, we propose a simple but effective learning framework via coupling bag of tricks, including multi-objective framework design, data augmentations, training and inference strategies. Our algorithm is memory-efficient and easily-equipped, without complicated modules and does not require for large pre-trained models. It achieves an excellent performance with Top-1 accuracy of 88.16% on public test set and 75.65% on private test set, and ranks 1st in domain generalization task of nicochallenge-2022.
updated: Tue Aug 23 2022 04:15:28 GMT+0000 (UTC)
published: Tue Aug 23 2022 04:15:28 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト