arXiv reaDer
BYOLMed3D: 勾配累積支援 3D BYOL フレームワークを使用した医療ビデオの自己教師あり表現学習
BYOLMed3D: Self-Supervised Representation Learning of Medical Videos using Gradient Accumulation Assisted 3D BYOL Framework
医用画像解析のアプリケーションは、医療専門家によって適切に注釈が付けられた大量のデータの深刻な不足に悩まされています。教師あり学習アルゴリズムでは、堅牢な表現を学習するために大量のバランスの取れたデータが必要です。多くの場合、教師あり学習アルゴリズムでは、不均衡なデータを処理するためにさまざまな手法が必要になります。一方、自己教師あり学習アルゴリズムは、データの不均衡に対して堅牢であり、堅牢な表現を学習できます。この作業では、勾配累積手法を使用して 3D BYOL 自己教師ありモデルをトレーニングし、自己教師ありアルゴリズムで一般的に必要とされるバッチ内の多数のサンプルを処理します。私たちの知る限り、この作品はこの分野で最初の作品の 1 つです。 ACL Tear Injury 検出のダウンストリーム タスクでの実験で得られた結果を、最新の自己監視型の事前トレーニング方法と、事前トレーニング済みの Kinetics-400 重みで初期化された ResNet3D-18 と比較します。ダウンストリーム タスクの実験から、提案されたフレームワークが既存のベースラインより優れていることは明らかです。
Applications on Medical Image Analysis suffer from acute shortage of large volume of data properly annotated by medical experts. Supervised Learning algorithms require a large volumes of balanced data to learn robust representations. Often supervised learning algorithms require various techniques to deal with imbalanced data. Self-supervised learning algorithms on the other hand are robust to imbalance in the data and are capable of learning robust representations. In this work, we train a 3D BYOL self-supervised model using gradient accumulation technique to deal with the large number of samples in a batch generally required in a self-supervised algorithm. To the best of our knowledge, this work is one of the first of its kind in this domain. We compare the results obtained through our experiments in the downstream task of ACL Tear Injury detection with the contemporary self-supervised pre-training methods and also with ResNet3D-18 initialized with the Kinetics-400 pre-trained weights. From the downstream task experiments, it is evident that the proposed framework outperforms the existing baselines.
updated: Sat Nov 12 2022 15:54:25 GMT+0000 (UTC)
published: Sun Jul 31 2022 14:48:06 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト