我没用过python语言写的分词程序。分词这种功能属于计算密集型功能,需要大量计算,python不适合这种场合,可以考虑python调用c库。
jieba分词 怎么说呢 这个是比较好的中文分词了
看用途,如果是跨度大的工程,楼上jieba正解,如果是针对性的,我宁可自己写dict,绝对是上上策
smallseg ;轻量级,容易使用。