arXiv reaDer
MAP Inference via L2-Sphere Linear Program Reformulation
 最大事後(MAP)推論は、グラフィカルモデルの重要なタスクです。現実的なモデルの変数間の複雑な依存関係のため、MAP推論の正確な解決策を見つけることはしばしば困難です。したがって、多くの近似法が開発されており、その中で線形計画法(LP)緩和に基づく方法は有望な性能を示しています。ただし、LP緩和の1つの大きな欠点は、分数解を与えることができることです。この作業では、より厳密な緩和を提示する代わりに、LS-LPと呼ばれる元のMAP推論問題の継続的かつ同等の再定式化を提案します。 L2球制約を元のLP緩和に追加し、すべての有効な整数ラベル構成のスペースに相当するローカルマージナルポリトープとの交差スペースを導きます。したがって、LS-LPは元のMAP推論問題と同等です。目的関数と制約に十分に小さな摂動イプシロンを追加することで、LS-LP問題を最適化する摂動交互方向乗数法(ADMM)アルゴリズムを提案します。摂動ADMMアルゴリズムが、LS-LP問題のイプシロン-Karush-Kuhn-Tucker(epsilon-KKT)ポイントにグローバルに収束することを証明します。収束率も分析されます。確率的推論チャレンジ(PIC 2011)およびOpenGM 2のいくつかのベンチマークデータセットの実験は、最新のMAP推論手法に対する提案手法の競争力のあるパフォーマンスを示しています。
Maximum a posteriori (MAP) inference is an important task for graphical models. Due to complex dependencies among variables in realistic model, finding an exact solution for MAP inference is often intractable. Thus, many approximation methods have been developed, among which the linear programming (LP) relaxation based methods show promising performance. However, one major drawback of LP relaxation is that it is possible to give fractional solutions. Instead of presenting a tighter relaxation, in this work we propose a continuous but equivalent reformulation of the original MAP inference problem, called LS-LP. We add the L2-sphere constraint onto the original LP relaxation, leading to an intersected space with the local marginal polytope that is equivalent to the space of all valid integer label configurations. Thus, LS-LP is equivalent to the original MAP inference problem. We propose a perturbed alternating direction method of multipliers (ADMM) algorithm to optimize the LS-LP problem, by adding a sufficiently small perturbation epsilon onto the objective function and constraints. We prove that the perturbed ADMM algorithm globally converges to the epsilon-Karush-Kuhn-Tucker (epsilon-KKT) point of the LS-LP problem. The convergence rate will also be analyzed. Experiments on several benchmark datasets from Probabilistic Inference Challenge (PIC 2011) and OpenGM 2 show competitive performance of our proposed method against state-of-the-art MAP inference methods.
updated: Mon Jan 20 2020 03:09:50 GMT+0000 (UTC)
published: Thu May 09 2019 03:47:15 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト