jieba 库

安装jieba库

命令行模式下使用pip即可安装

jieba分词原理

jieba分词依靠中文词库

利用一个中文题库,确定汉字直接的关联概率

汉字间概率大的组成词组,形成分词结果

除了分词,用户还可以添加自定义的词组

jieba库使用说明

三种分词模式