arXiv reaDer
VR-Caps:カプセル内視鏡検査のための仮想環境
VR-Caps: A Virtual Environment for Capsule Endoscopy
消化器疾患の診断と治療のための現在のカプセル内視鏡と次世代ロボットカプセルは、複雑なソフトウェアとハードウェアの機能を統合する必要がある複雑なサイバー物理プラットフォームです。これらのシステムに必要なタスクには、視覚的な位置特定、深度推定、3Dマッピング、疾患の検出とセグメンテーション、自動ナビゲーション、アクティブ制御、経路の実現、およびターゲット薬物送達や生検サンプリングなどのオプションの治療モジュールが含まれます。データ駆動型アルゴリズムは、カプセル型内視鏡の多くの高度な機能を可能にすることを約束しますが、実際のデータを取得するのは困難です。合成データを提供する物理的に現実的なシミュレーションは、データ駆動型アルゴリズムの開発に対するソリューションとして浮上しています。この作業では、カプセル内視鏡手術の包括的なシミュレーションプラットフォームを提示し、正常および異常な組織状態(膨張、乾燥、湿潤など)とさまざまな臓器タイプをシミュレートする仮想アクティブカプセル環境であるVR-Capsを紹介します、カプセル内視鏡の設計(モノ、ステレオ、デュアル、360°カメラなど)、アクティブな移動を可能にする内部および外部の磁気源のタイプ、数、強度、配置。 VR-Capsは、現在および次世代の内視鏡カプセルシステム向けの医療用画像および分析ソフトウェアを個別または共同で開発、最適化、およびテストすることを可能にします。このアプローチを検証するために、最先端のディープニューラルネットワークをトレーニングして、VR-Capsからのシミュレーションデータを使用してさまざまな医療画像分析タスクを実行し、実際の医療データに対するこれらのモデルのパフォーマンスを評価します。結果は、部分的なカバレッジ、カメラの軌跡、3Dマップの再構成、および疾患の分類を定量化するアルゴリズムの開発における、提案された仮想プラットフォームの有用性と有効性を示しています。
Current capsule endoscopes and next-generation robotic capsules for diagnosis and treatment of gastrointestinal diseases are complex cyber-physical platforms that must orchestrate complex software and hardware functions. The desired tasks for these systems include visual localization, depth estimation, 3D mapping, disease detection and segmentation, automated navigation, active control, path realization and optional therapeutic modules such as targeted drug delivery and biopsy sampling. Data-driven algorithms promise to enable many advanced functionalities for capsule endoscopes, but real-world data is challenging to obtain. Physically-realistic simulations providing synthetic data have emerged as a solution to the development of data-driven algorithms. In this work, we present a comprehensive simulation platform for capsule endoscopy operations and introduce VR-Caps, a virtual active capsule environment that simulates a range of normal and abnormal tissue conditions (e.g., inflated, dry, wet etc.) and varied organ types, capsule endoscope designs (e.g., mono, stereo, dual and 360°camera), and the type, number, strength, and placement of internal and external magnetic sources that enable active locomotion. VR-Caps makes it possible to both independently or jointly develop, optimize, and test medical imaging and analysis software for the current and next-generation endoscopic capsule systems. To validate this approach, we train state-of-the-art deep neural networks to accomplish various medical image analysis tasks using simulated data from VR-Caps and evaluate the performance of these models on real medical data. Results demonstrate the usefulness and effectiveness of the proposed virtual platform in developing algorithms that quantify fractional coverage, camera trajectory, 3D map reconstruction, and disease classification.
updated: Thu Jan 14 2021 12:55:11 GMT+0000 (UTC)
published: Sat Aug 29 2020 09:54:05 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト