カード編集

問題

答え・判断基準 exp(L)。モデルが正解系列へ高い確率を割り当てるほどLとperplexityは小さくなる。

種類 即答 選択肢消去 数式 PyTorch対応 用語

章

論点

解説 perplexityを異なるtokenizationや語彙で単純比較すると、1 tokenの単位が違うため解釈を誤り得る。

Is active