arXiv reaDer
MToFNet:モバイル飛行時間データを使用したオブジェクトのなりすまし防止
MToFNet: Object Anti-Spoofing with Mobile Time-of-Flight Data
オンライン市場では、売り手はディスプレイ画面上の他人の画像を悪意を持って再キャプチャし、なりすまし画像として利用する可能性があります。これは、人間の目で区別するのが難しい場合があります。このような危害を防ぐために、モバイルカメラが提供する戦闘時間センサーを備えたrgb画像と深度マップのペアを使用したなりすまし防止方法を提案します。表示画面に画像を再キャプチャすると、モアレパターンと呼ばれる画面によって異なるさまざまなパターンをなりすまし画像にキャプチャすることもできます。これらのパターンにより、なりすまし防止モデルが過剰適合し、目に見えないメディアに再キャプチャされたなりすまし画像を検出できなくなります。この問題を回避するために、2つの埋め込みモデルで構成される新しい表現モデルを構築します。これは、再キャプチャされた画像を考慮せずにトレーニングできます。また、最大かつ最も多様なオブジェクトのなりすまし防止データセットであり、ToFデータを最初に利用したmToFデータセットを新たに導入します。実験結果は、私たちのモデルが目に見えないドメイン間でも堅牢な一般化を達成することを確認しています。
In online markets, sellers can maliciously recapture others' images on display screens to utilize as spoof images, which can be challenging to distinguish in human eyes. To prevent such harm, we propose an anti-spoofing method using the paired rgb images and depth maps provided by the mobile camera with a Time-of-Fight sensor. When images are recaptured on display screens, various patterns differing by the screens as known as the moiré patterns can be also captured in spoof images. These patterns lead the anti-spoofing model to be overfitted and unable to detect spoof images recaptured on unseen media. To avoid the issue, we build a novel representation model composed of two embedding models, which can be trained without considering the recaptured images. Also, we newly introduce mToF dataset, the largest and most diverse object anti-spoofing dataset, and the first to utilize ToF data. Experimental results confirm that our model achieves robust generalization even across unseen domains.
updated: Wed Oct 06 2021 05:24:33 GMT+0000 (UTC)
published: Wed Oct 06 2021 05:24:33 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト