arXiv reaDer
半教師あり生から生へのマッピング
Semi-Supervised Raw-to-Raw Mapping
カメラセンサーのrawRGBカラーは、センサーのメーカーやモデルによってスペクトル感度が異なるために異なります。このホワイトペーパーでは、さまざまなセンサーのraw-RGB色空間間のマッピングタスクに焦点を当てています。以前の作業では、ペアワイズキャリブレーションを使用してこの問題に対処し、正確なカラーマッピングを実現しました。正確ではありますが、このアプローチは必要なため実用的ではありません。(1)新しいシーンごとにカラーキャリブレーションオブジェクトを配置して、両方のカメラデバイスで画像のペアをキャプチャします。 (2)カラーキャリブレーションオブジェクトの正確な画像位置合わせまたは手動注釈。この論文は、より実用的なセットアップを通じて、生の空間でのカラーマッピングに取り組むことを目的としています。具体的には、各カメラデバイスによってキャプチャされたペアになっていない画像のセットと一緒にペアになっている画像の小さなセットでトレーニングされた半教師ありのrawからrawへのマッピング方法を示します。広範な実験を通じて、私たちの方法は、単一のキャリブレーションソリューションに加えて他のドメイン適応の選択肢と比較してより良い結果を達成することを示しています。この取り組みの一環として、2つの異なるスマートフォンカメラから生画像の新しいデータセットを生成しました。私たちのデータセットには、半教師ありトレーニングと評価のためのペアになっていないセットとペアになっているセットが含まれています。
The raw-RGB colors of a camera sensor vary due to the spectral sensitivity differences across different sensor makes and models. This paper focuses on the task of mapping between different sensor raw-RGB color spaces. Prior work addressed this problem using a pairwise calibration to achieve accurate color mapping. Although being accurate, this approach is less practical as it requires: (1) capturing pair of images by both camera devices with a color calibration object placed in each new scene; (2) accurate image alignment or manual annotation of the color calibration object. This paper aims to tackle color mapping in the raw space through a more practical setup. Specifically, we present a semi-supervised raw-to-raw mapping method trained on a small set of paired images alongside an unpaired set of images captured by each camera device. Through extensive experiments, we show that our method achieves better results compared to other domain adaptation alternatives in addition to the single-calibration solution. We have generated a new dataset of raw images from two different smartphone cameras as part of this effort. Our dataset includes unpaired and paired sets for our semi-supervised training and evaluation.
updated: Fri Jun 25 2021 21:01:45 GMT+0000 (UTC)
published: Fri Jun 25 2021 21:01:45 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト