目的。超音波画像のナビゲーションと解釈に必要な高度な専門知識を考えると、計算シミュレーションは、仮想現実におけるそのようなスキルのトレーニングを容易にすることができます。レイトレーシングベースのシミュレーションを使用すると、リアルな超音波画像を生成できます。ただし、対話性の計算上の制約により、通常、画質を妥協する必要があります。メソッド。ここでは、タイムクリティカルではないオフライン段階でそのようなシミュレーションを実行し、断面モデルスライスからそのようなシミュレートされたフレームへの画像変換を学習することにより、インタラクティブな時間にレンダリングおよびシミュレーションプロセスをバイパスすることを提案します。専用のジェネレータアーキテクチャと入力フィードスキームを備えた生成的敵対的フレームワークを使用します。これらは両方とも、ネットワークパラメータを増やすことなく画質を大幅に向上させます。断面モデルスライスから導出された積分減衰マップ、テクスチャに適したストライド畳み込み、確率的ノイズの提供、および局所性を維持するための中間層への入力マップはすべて、このような変換タスクを大幅に容易にするためにここに示されています。結果。いくつかの品質指標が与えられると、入力として組織マップのみを使用する提案された方法は、低品質の超音波レンダリングの追加画像を使用する最先端技術と同等または優れた結果を提供することが示されています。広範なアブレーション研究は、定性的な例と定量的な超音波類似性メトリックに基づいて、この作業で利用される個々の貢献からの必要性と利点を示しています。そのために、超音波画像間の局所的な非類似性を視覚化するために、局所的なヒストグラム統計に基づくエラーメトリックが提案され、実証されています。
Purpose. Given the high level of expertise required for navigation and interpretation of ultrasound images, computational simulations can facilitate the training of such skills in virtual reality. With ray-tracing based simulations, realistic ultrasound images can be generated. However, due to computational constraints for interactivity, image quality typically needs to be compromised. Methods. We propose herein to bypass any rendering and simulation process at interactive time, by conducting such simulations during a non-time-critical offline stage and then learning image translation from cross-sectional model slices to such simulated frames. We use a generative adversarial framework with a dedicated generator architecture and input feeding scheme, which both substantially improve image quality without increase in network parameters. Integral attenuation maps derived from cross-sectional model slices, texture-friendly strided convolutions, providing stochastic noise and input maps to intermediate layers in order to preserve locality are all shown herein to greatly facilitate such translation task. Results. Given several quality metrics, the proposed method with only tissue maps as input is shown to provide comparable or superior results to a state-of-the-art that uses additional images of low-quality ultrasound renderings. An extensive ablation study shows the need and benefits from the individual contributions utilized in this work, based on qualitative examples and quantitative ultrasound similarity metrics. To that end, a local histogram statistics based error metric is proposed and demonstrated for visualization of local dissimilarities between ultrasound images.