知識蒸留（読み）チシキジョウリュウ

デジタル大辞泉 「知識蒸留」の意味・読み・例文・類語

ちしき‐じょうりゅう〔‐ジヨウリウ〕【知識蒸留】

機械学習において、膨大なデータでトレーニングした大規模言語モデルのような学習モデルを、精度を保ちつつ、より小規模のモデルにする手法。大規模な学習モデルを教師モデル、小規模な学習モデルを生徒モデルとし、推論能力や知識の精度が低くならないよう、生徒モデルが教師モデルの出力を模倣するトレーニングを繰り返すことで得られる。蒸留。

出典　小学館デジタル大辞泉について　情報 | 凡例

関連語 言語モデル

今日のキーワード

辞書

１ 多数の語を集録し、一定の順序に配列して一つの集合体として、個々の語の意味・用法、またはその示す内容について記したもの。語のほかに接辞や連語・諺なども収める。また、語の表記単位である文字、特に漢字を...

辞書の用語解説を読む