arXiv reaDer
医用画像アプリケーションにおける数ショット学習のためのNASのメタ学習
Meta-Learning of NAS for Few-shot Learning in Medical Image Applications
深層学習手法は、機械学習のタスクの解決に成功しており、非構造化データから特徴を自動的に抽出できるため、多くの分野で画期的な成果を上げています。ただし、それらのパフォーマンスは、適切なネットワークアーキテクチャを選択するための手動の試行錯誤プロセス、トレーニング用のハイパーパラメータ、および手順の前後に依存しています。ネットワークアーキテクチャは、データと最終的なパフォーマンスから特徴表現機能を学習する上で重要な役割を果たすことが示されていますが、最適なネットワークアーキテクチャの検索は計算量が多く、研究者の経験に大きく依存しています。自動機械学習(AutoML)とその高度な技術、つまりニューラルアーキテクチャ検索(NAS)は、これらの制限に対処するために推進されてきました。 NASは、一般的なコンピュータビジョンのタスクだけでなく、医用画像を含む複数の分野でさまざまなアプリケーションを動機付けてきました。医用画像では、NASは画像の分類、セグメンテーション、再構成などの精度を向上させる上で大きな進歩を遂げています。ただし、NASには、大きな注釈付きデータ、かなりの計算リソース、および事前定義されたタスクの可用性が必要です。このような制限に対処するために、メタ学習は、数回の学習と複数のタスクのシナリオで採用されています。この本の章では、最初に、検索スペース、検索戦略、および評価戦略におけるよく知られたアプローチについて説明することにより、NASの簡単なレビューを示します。次に、分類、セグメンテーション、検出、再構成などのさまざまなアプリケーションを使用した医用画像処理におけるさまざまなNASアプローチを紹介します。次に、NASでの数ショット学習と複数のタスクのためのメタ学習について説明します。最後に、NASのいくつかの未解決の問題について説明します。
Deep learning methods have been successful in solving tasks in machine learning and have made breakthroughs in many sectors owing to their ability to automatically extract features from unstructured data. However, their performance relies on manual trial-and-error processes for selecting an appropriate network architecture, hyperparameters for training, and pre-/post-procedures. Even though it has been shown that network architecture plays a critical role in learning feature representation feature from data and the final performance, searching for the best network architecture is computationally intensive and heavily relies on researchers' experience. Automated machine learning (AutoML) and its advanced techniques i.e. Neural Architecture Search (NAS) have been promoted to address those limitations. Not only in general computer vision tasks, but NAS has also motivated various applications in multiple areas including medical imaging. In medical imaging, NAS has significant progress in improving the accuracy of image classification, segmentation, reconstruction, and more. However, NAS requires the availability of large annotated data, considerable computation resources, and pre-defined tasks. To address such limitations, meta-learning has been adopted in the scenarios of few-shot learning and multiple tasks. In this book chapter, we first present a brief review of NAS by discussing well-known approaches in search space, search strategy, and evaluation strategy. We then introduce various NAS approaches in medical imaging with different applications such as classification, segmentation, detection, reconstruction, etc. Meta-learning in NAS for few-shot learning and multiple tasks is then explained. Finally, we describe several open problems in NAS.
updated: Wed Mar 16 2022 21:21:51 GMT+0000 (UTC)
published: Wed Mar 16 2022 21:21:51 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト