「計算言語学」の版間の差分

実際の言語データ（[[コーパス]]）から計算によって言語の特徴を取り出し、言語の分析を行なう。

=== ''n''-gram ===

1 つのものだけを数えるのでなく、隣接するものの頻度を数える。ある単位の生起が直後 ''n'' 個の単位にだけ依存すると考える言語モデル。

一定区間に ''n'' 個の単位が出現 (共起) する頻度。二2 つの単語が一緒に出て来くる共起のしやすさを計る。作成された単語のクラスタは、例えば、統計ベースの言語処理において「データ・スパースネス問題」の対処に用いたり、新聞の関連記事を検索する際に有効である。