arXiv reaDer
Towards Learning a Self-inverse Network for Bidirectional Image-to-image Translation
  MRI画像は患者に固有であるため、MRI画像合成など、多くの双方向の画像から画像への変換アプリケーションには、1対1のマッピングが必要です。ドメインXからドメインYへの画像合成のための最先端のアプローチは、ドメイン間を綿密にマッピングする畳み込みニューラルネットワークを学習します。通常、YからXの反対方向に沿ってマッピングするために、異なるネットワークが実装されます。このホワイトペーパーでは、双方向画像合成に1つのネットワークのみを使用する可能性を検討します。言い換えれば、そのような自律学習ネットワークは自己反転機能を実装しています。自己反転ネットワークには、いくつかの明確な利点があります。2つではなく1つのネットワークのみ、より一般化され、より制限されたパラメータースペースです。最も重要なことは、自己逆関数が1対1のマッピングを保証することです。これは、自己逆関数ではない以前のアプローチでは保証できない特性です。 3つのデータセットでの実験は、2つの方向に沿った画像合成に2つの別々のモデルを使用するベースラインアプローチと比較して、当社の自己逆ネットワークが標準メトリックに関してより良い合成結果を達成することを示しています。最後に、感度分析により、双方向の画像変換のための自己逆関数の学習の実現可能性が確認されます。
The one-to-one mapping is necessary for many bidirectional image-to-image translation applications, such as MRI image synthesis as MRI images are unique to the patient. State-of-the-art approaches for image synthesis from domain X to domain Y learn a convolutional neural network that meticulously maps between the domains. A different network is typically implemented to map along the opposite direction, from Y to X. In this paper, we explore the possibility of only wielding one network for bi-directional image synthesis. In other words, such an autonomous learning network implements a self-inverse function. A self-inverse network shares several distinct advantages: only one network instead of two, better generalization and more restricted parameter space. Most importantly, a self-inverse function guarantees a one-to-one mapping, a property that cannot be guaranteed by earlier approaches that are not self-inverse. The experiments on three datasets show that, compared with the baseline approaches that use two separate models for the image synthesis along two directions, our self-inverse network achieves better synthesis results in terms of standard metrics. Finally, our sensitivity analysis confirms the feasibility of learning a self-inverse function for the bidirectional image translation.
updated: Mon Sep 16 2019 20:46:02 GMT+0000 (UTC)
published: Mon Sep 09 2019 18:56:30 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト