arXiv reaDer
学習可能な眼科SAM
Learnable Ophthalmology SAM
セグメンテーションは、眼科の画像解析に不可欠です。しかし、そのさまざまなモーダル イメージは、多数のラベルに基づくトレーニングに依存しているか、一般化能力が弱いため、既存のセグメンテーション アルゴリズム アプリケーションのほとんどを妨げています。 Segment Anything (SAM) に基づいて、Learnable Ophthalmology Segment Anything (SAM) という名前の、眼科マルチモーダル画像の複数のターゲットセグメンテーションに適した、シンプルだが効果的な学習可能なプロンプトレイヤーを提案します。学習可能なプロンプト層は、各変換層から医学的事前知識を学習します。トレーニング中は、ワンショット メカニズムに基づいてプロンプト レイヤーとタスク ヘッドのみをトレーニングします。公開されている 9 つのデータセットに基づく 4 つの医療セグメンテーション タスクに基づいて、私たちの考えの有効性を実証します。さらに、既存の基本的な CV モデルを医療分野に適用するための新しい改善案を提供するだけです。私たちのコードは、https://github.com/Qsingle/LearnablePromptSAMwebsite で入手できます。
Segmentation is vital for ophthalmology image analysis. But its various modal images hinder most of the existing segmentation algorithms applications, as they rely on training based on a large number of labels or hold weak generalization ability. Based on Segment Anything (SAM), we propose a simple but effective learnable prompt layer suitable for multiple target segmentation in ophthalmology multi-modal images, named Learnable Ophthalmology Segment Anything (SAM). The learnable prompt layer learns medical prior knowledge from each transformer layer. During training, we only train the prompt layer and task head based on a one-shot mechanism. We demonstrate the effectiveness of our thought based on four medical segmentation tasks based on nine publicly available datasets. Moreover, we only provide a new improvement thought for applying the existing fundamental CV models in the medical field. Our codes are available at https://github.com/Qsingle/LearnablePromptSAMwebsite.
updated: Wed Apr 26 2023 10:14:03 GMT+0000 (UTC)
published: Wed Apr 26 2023 10:14:03 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト