この作業は、クロスエントロピー損失によって見落とされた情報源を利用して、分類問題を対象とした新しい損失関数を提案します。最初に、与えられた間隔での確率変数の確率の一連の最も厳しい上限と下限を導き出します。次に、パラメトリック分類問題の真陽性の確率の下限が提案されます。ここでは、データの確率密度関数(pdf)の形式が示されます。未知数の最適関数を見つけるための閉じた形は、真陽性の確率を最大化するために導き出されます。最後に、データのpdfが不明な場合、提案された境界を適用して、真陽性の確率の下限と偽陽性の確率の上限を見つけ、組み合わせて与えられる損失関数を使用してそれらを最適化します。境界。結果として得られる損失関数は、ロジット内およびロジット間の信号対雑音比の関数であることを示します。提案を経験的に評価して、分類問題に対する利点を示します。
This work proposes a new loss function targeting classification problems, utilizing a source of information overlooked by cross entropy loss. First, we derive a series of the tightest upper and lower bounds for the probability of a random variable in a given interval. Second, a lower bound is proposed for the probability of a true positive for a parametric classification problem, where the form of probability density function (pdf) of data is given. A closed form for finding the optimal function of unknowns is derived to maximize the probability of true positives. Finally, for the case that the pdf of data is unknown, we apply the proposed boundaries to find the lower bound of the probability of true positives and upper bound of the probability of false positives and optimize them using a loss function which is given by combining the boundaries. We demonstrate that the resultant loss function is a function of the signal to noise ratio both within and across logits. We empirically evaluate our proposals to show their benefit for classification problems.