Python 中使用 NLTK 创建 n-gram 模型

安装 NLTK 库

// Python 2.x
pip install nltk

// Python 3.x
pip3 install nltk

下载 NLTK 自带文本库

import nltk
nltk.download()

创建 2-gram 模型

from nltk import FreqDist
from nltk import ngrams
from nltk.book import text6

bigrams = ngrams(text6, 2)
bigramsDist = FreqDist(bigrams)
print(bigramsDist.most_common(10))

参考

《Python 网络数据采集》