arXiv reaDer
On the Out-of-distribution Generalization of Probabilistic Image Modelling
分布外(OOD)検出と可逆圧縮は、最初のデータセットで確率モデルをトレーニングし、その後、データ分布が異なる2番目のデータセットで尤度評価を行うことで解決できる2つの問題を構成します。尤度の観点から確率モデルの一般化を定義することにより、画像モデルの場合、OOD一般化能力が局所的な特徴によって支配されることを示します。これは、OODパフォーマンスの向上に向けてローカル画像の特徴を排他的にモデル化するローカル自己回帰モデルの提案を動機付けます。提案されたモデルをOOD検出タスクに適用し、追加データを導入することなく、最先端の教師なしOOD検出パフォーマンスを実現します。さらに、このモデルを使用して、新しいロスレスイメージコンプレッサーであるNeLLoC(Neural Local Lossless Compressor)を構築し、最先端の圧縮率とモデルサイズを報告します。
Out-of-distribution (OOD) detection and lossless compression constitute two problems that can be solved by the training of probabilistic models on a first dataset with subsequent likelihood evaluation on a second dataset, where data distributions differ. By defining the generalization of probabilistic models in terms of likelihood we show that, in the case of image models, the OOD generalization ability is dominated by local features. This motivates our proposal of a Local Autoregressive model that exclusively models local image features towards improving OOD performance. We apply the proposed model to OOD detection tasks and achieve state-of-the-art unsupervised OOD detection performance without the introduction of additional data. Additionally, we employ our model to build a new lossless image compressor: NeLLoC (Neural Local Lossless Compressor) and report state-of-the-art compression rates and model size.
updated: Sun Oct 24 2021 00:33:51 GMT+0000 (UTC)
published: Sat Sep 04 2021 17:00:37 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト