統計的言語モデル
単語の出現分布や,ある単語の次に出現する単語の分布等,言語表現の出現確率を計算するための確率モデルのこと。
統計的言語モデルを利用すれば,仮に辞書の中に10万単語が登録されていたとしても,ある単語の次に出現し得る単語の候補を100単語ぐらいに絞ることができるので,実質的に語彙が制限された状態と同じになる。
単語の出現分布や,ある単語の次に出現する単語の分布等,言語表現の出現確率を計算するための確率モデルのこと。
統計的言語モデルを利用すれば,仮に辞書の中に10万単語が登録されていたとしても,ある単語の次に出現し得る単語の候補を100単語ぐらいに絞ることができるので,実質的に語彙が制限された状態と同じになる。