arXiv reaDer
実世界の画像翻訳のためのメタ学習と自己監視による事前トレーニング
Meta-Learning and Self-Supervised Pretraining for Real World Image Translation
特にハードウェアの進歩とビッグデータによって可能になったディープラーニングの最近の進歩は、コンピュータービジョン、自然言語、強化学習などの幅広い計算問題にわたって印象的な結果をもたらしました。ただし、これらの改善の多くは、収集に多くの人的労力を必要とする大規模なキュレートされたデータセットの問題に限定されています。さらに、これらのモデルは、わずかな分布の変化と低データレジームの両方で一般化が不十分になる傾向があります。近年、メタ学習や自己監視学習などの新しい分野では、深層学習を半教師ありおよび少数ショットに拡張することで、概念実証の結果と機械学習の実際のアプリケーションとの間のギャップを埋めています。ドメイン。この一連の作業に従い、最近導入された画像から画像への変換問題の時空間構造を調査して、次のことを行います。i)新しいマルチタスクの数ショットの画像生成ベンチマークを作成し、ii)対照的な前のデータ拡張を調査する-画像変換のダウンストリームタスクのトレーニング。数ショットの問題のいくつかのベースラインを提示し、さまざまなアプローチ間のトレードオフについて説明します。私たちのコードはhttps://github.com/irugina/meta-image-translationで入手できます。
Recent advances in deep learning, in particular enabled by hardware advances and big data, have provided impressive results across a wide range of computational problems such as computer vision, natural language, or reinforcement learning. Many of these improvements are however constrained to problems with large-scale curated data-sets which require a lot of human labor to gather. Additionally, these models tend to generalize poorly under both slight distributional shifts and low-data regimes. In recent years, emerging fields such as meta-learning or self-supervised learning have been closing the gap between proof-of-concept results and real-life applications of machine learning by extending deep-learning to the semi-supervised and few-shot domains. We follow this line of work and explore spatio-temporal structure in a recently introduced image-to-image translation problem in order to: i) formulate a novel multi-task few-shot image generation benchmark and ii) explore data augmentations in contrastive pre-training for image translation downstream tasks. We present several baselines for the few-shot problem and discuss trade-offs between different approaches. Our code is available at https://github.com/irugina/meta-image-translation.
updated: Wed Dec 22 2021 14:48:22 GMT+0000 (UTC)
published: Wed Dec 22 2021 14:48:22 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト