arXiv reaDer
新しいデータセットと劣化モデルを使用した実用的な SDR から HDRTV へのアップコンバージョンの学習
Learning a Practical SDR-to-HDRTV Up-conversion using New Dataset and Degradation Models
メディア業界では、ユーザーが HDR-WCG (高ダイナミック レンジ、広色域) TV を所有しているときに、SDR から HDRTV へのアップコンバージョンの需要が生じますが、ほとんどの市販の映像はまだ SDR (標準ダイナミック レンジ) です。研究コミュニティは、学習ベースのアプローチによって、この低レベルの視覚タスクに取り組み始めました。ただし、実際の SDR に適用すると、現在の方法では薄暗く彩度の低い結果が生成される傾向があり、視聴体験はほとんど改善されません。他のネットワーク指向の方法とは異なり、このような欠陥はトレーニング セット (HDR-SDR ペア) に起因すると考えられます。その結果、新しい HDRTV データセット (HDRTV4K と呼ばれる) と新しい HDR から SDR への劣化モデルを提案します。次に、グローバル マッピング トランクと、明るい輝度範囲と暗い輝度範囲の 2 つの Transformer ブランチで構成される輝度セグメント化ネットワーク (LSN) のトレーニングに使用されます。また、カスタマイズされたメトリクスと主観的な実験によって評価基準を更新します。最後に、有効性を証明するためにアブレーション研究が行われます。私たちの作品は https://github.com/AndreGuo/HDRTVDM で入手できます。
In media industry, the demand of SDR-to-HDRTV up-conversion arises when users possess HDR-WCG (high dynamic range-wide color gamut) TVs while most off-the-shelf footage is still in SDR (standard dynamic range). The research community has started tackling this low-level vision task by learning-based approaches. When applied to real SDR, yet, current methods tend to produce dim and desaturated result, making nearly no improvement on viewing experience. Different from other network-oriented methods, we attribute such deficiency to training set (HDR-SDR pair). Consequently, we propose new HDRTV dataset (dubbed HDRTV4K) and new HDR-to-SDR degradation models. Then, it's used to train a luminance-segmented network (LSN) consisting of a global mapping trunk, and two Transformer branches on bright and dark luminance range. We also update assessment criteria by tailored metrics and subjective experiment. Finally, ablation studies are conducted to prove the effectiveness. Our work is available at: https://github.com/AndreGuo/HDRTVDM.
updated: Thu Mar 23 2023 04:40:33 GMT+0000 (UTC)
published: Thu Mar 23 2023 04:40:33 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト