probability / odds / logits到底是什么

2020-07-21 本文已影响0人何哀何欢

probability：发生的概率 $\in[0, 1]$
　　发生的次数/总次数
　　0：不发生 1：必发生

odds：发生比 $\in [0, \infty)$
　　发生的概率 / 不发生的概率
　　 $\frac{P}{1-P}$
　　0：不发生， $\rightarrow \infty$ ：必发生

logits: 发生比的log值 $\in (-\infty, \infty)$
　　其实就是整个有理数了
　　 $log(odds)$
　　 $-\infty \leftarrow$ ：不发生， $\rightarrow \infty$ ：必发生

感觉就是用各种范围来表示概率

Softmax：直接将 logits 搞为 probability
Softmax 和 Corssentropy 详解