#text-processing

jieba 是纯 Python 的中文分词库，装完 import 就能切，带精确、全模式、搜索引擎三种粒度和自定义词典。19.1 万字的真实语料 0.28 秒切完，折合 67.68 万字/秒；import 0.45 秒、首次调用还要 0.38 秒加载词典。关键词提取 TF-IDF 0.04 秒，TextRank 0.47 秒。