arXiv reaDer
分布の変化の説明に向けて
Towards Explaining Distribution Shifts
分布の変化は、動作環境の変化を知らせたり、下流モデルの精度を大幅に低下させたりするなど、根本的な影響を与える可能性があります。したがって、分布の変化を理解することは、そのような変化の影響を調査し、できれば軽減するために重要です。従来の研究のほとんどは、シフトが発生したかどうかを検出することのみに焦点を当てており、検出されたシフトは人間のオペレーターによって理解され、適切に処理できると想定されていました。元の分布から移行後の分布への解釈可能な輸送マップを使用して分布の移行を説明することで、これらの手動による緩和タスクを支援したいと考えています。最適なトランスポートの緩和から解釈可能なマッピングを導出します。この場合、候補マッピングは解釈可能なマッピングのセットに制限されます。次に、実世界の表形式、テキスト、および画像のデータセットにおける分布シフトの典型的な複数のユースケースを検査し、視覚的検査と PercentExplained メトリクスの両方によって、説明マッピングがベースラインの説明よりも詳細と解釈可能性のバランスをどのように高めているかを示します。
A distribution shift can have fundamental consequences such as signaling a change in the operating environment or significantly reducing the accuracy of downstream models. Thus, understanding distribution shifts is critical for examining and hopefully mitigating the effect of such a shift. Most prior work focuses on merely detecting if a shift has occurred and assumes any detected shift can be understood and handled appropriately by a human operator. We hope to aid in these manual mitigation tasks by explaining the distribution shift using interpretable transportation maps from the original distribution to the shifted one. We derive our interpretable mappings from a relaxation of optimal transport, where the candidate mappings are restricted to a set of interpretable mappings. We then inspect multiple quintessential use-cases of distribution shift in real-world tabular, text, and image datasets to showcase how our explanatory mappings provide a better balance between detail and interpretability than baseline explanations by both visual inspection and our PercentExplained metric.
updated: Tue Jun 20 2023 04:30:42 GMT+0000 (UTC)
published: Wed Oct 19 2022 03:38:57 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト