KLダイバージェンスとは

2つの確率分布がどれくらい異なっているかを数値で表す指標です。AIの学習において、AIの予測結果とお手本となるデータのズレを計算して調整する際によく使われます。

たとえるなら — お手本の料理レシピと自分が実際に作った料理の味付けのズレを数値化して測るようなものです。