現在、ディープ ニューラル ネットワーク (DNN) は幅広い研究分野で目覚ましい進歩を遂げていますが、環境の不一致の問題から、実際のアプリケーションに適用するには適応性に欠けています。このような問題は、トレーニング環境とテスト環境の違いに起因し、事前にトレーニングされた DNN モデルを新しいテスト環境に適用すると、深刻なパフォーマンス低下を引き起こすことが広く知られています。したがって、このホワイト ペーパーでは、エンド ユーザーがモデルを変更せずに、独自のテスト環境で事前トレーニング済みの DNN モデルを利用できるようにする新しいアプローチを紹介します。この目的のために、テストデータの分布をトレーニングデータの分布に合わせて変換する追加の入力であるメタ入力を提示します。提案されたメタ入力は、テスト入力データとその出力予測との関係を考慮するだけで、少数のテスト データで最適化できます。また、ネットワークの内部アーキテクチャや重みパラメータの変更についての知識も必要ありません。次に、取得したメタ入力をテスト データに追加して、テスト データの分布を元のトレーニング データの分布にシフトします。その結果、エンドユーザーは、トレーニング環境とは異なる独自のテスト環境で、十分にトレーニングされたモデルを活用できます。さまざまなタスクを含む包括的な実験を通じて、環境の不一致に対するロバスト性を示すことにより、提案されたメタ入力の有効性と汎用性を検証します。
These days, although deep neural networks (DNNs) have achieved a noticeable progress in a wide range of research area, it lacks the adaptability to be employed in the real-world applications because of the environment discrepancy problem. Such a problem originates from the difference between training and testing environments, and it is widely known that it causes serious performance degradation, when a pretrained DNN model is applied to a new testing environment. Therefore, in this paper, we introduce a novel approach that allows end-users to exploit pretrained DNN models in their own testing environment without modifying the models. To this end, we present a meta input which is an additional input transforming the distribution of testing data to be aligned with that of training data. The proposed meta input can be optimized with a small number of testing data only by considering the relation between testing input data and its output prediction. Also, it does not require any knowledge of the network's internal architecture and modification of its weight parameters. Then, the obtained meta input is added to testing data in order to shift the distribution of testing data to that of originally used training data. As a result, end-users can exploit well-trained models in their own testing environment which can differ from the training environment. We validate the effectiveness and versatility of the proposed meta input by showing the robustness against the environment discrepancy through the comprehensive experiments with various tasks.