arXiv reaDer
Lasry-Lionsエンベロープと非凸最適化:ホモトピーアプローチ
Lasry-Lions Envelopes and Nonconvex Optimization: A Homotopy Approach
大規模な最適化では、特定の問題に滑らかでない項と凸でない項が存在すると、通常、解決が困難になります。凸最適化で滑らかでない項に対処するための一般的なアプローチは、それぞれのモローエンベロープでそれらを近似することです。この作業では、Lasry-Lionsの二重エンベロープを使用して、凸面ではない滑らかでない項を近似する方法を検討します。これらのエンベロープはモローのものの拡張ですが、高速最適化アルゴリズムに対応できるようにする追加の滑らかさプロパティを示します。 Lasry-Lionsエンベロープは、特定の関数とその凸包の間の「中間」と見なすこともできます。このプロパティを使用して、元の問題よりも簡単に解決できる一連の近似サブ問題を構築する方法を開発します。複合最小化問題に対処するために使用される場合のこのメソッドの収束特性について説明します。さらに、いくつかの実験に基づいて、信号のデコードとスペクトルのアンミキシングという2つのドメインで従来の代替手段よりも役立つ可能性のある設定について説明します。
In large-scale optimization, the presence of nonsmooth and nonconvex terms in a given problem typically makes it hard to solve. A popular approach to address nonsmooth terms in convex optimization is to approximate them with their respective Moreau envelopes. In this work, we study the use of Lasry-Lions double envelopes to approximate nonsmooth terms that are also not convex. These envelopes are an extension of the Moreau ones but exhibit an additional smoothness property that makes them amenable to fast optimization algorithms. Lasry-Lions envelopes can also be seen as an "intermediate" between a given function and its convex envelope, and we make use of this property to develop a method that builds a sequence of approximate subproblems that are easier to solve than the original problem. We discuss convergence properties of this method when used to address composite minimization problems; additionally, based on a number of experiments, we discuss settings where it may be more useful than classical alternatives in two domains: signal decoding and spectral unmixing.
updated: Mon Mar 15 2021 16:55:11 GMT+0000 (UTC)
published: Mon Mar 15 2021 16:55:11 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト