perplexity

$ \text{ppl} = \exp \left( -\frac{1}{N} \sum_n \sum_k t_{n,k} \log p_{\text{model}}(y_{n,k}) \right)

この値が小さい例

https://data-analytics.fun/wp-content/uploads/2022/01/image-5-768x382.png

大きい例

https://data-analytics.fun/wp-content/uploads/2022/01/image-7.png

小さいほど自信をもって(断定して)答えている