「中文分词」相关内容（1篇）

zhon对比：一次清洗复盘

zhon对比最容易讲空，我直接拿一次评论清洗复盘说。场景是电商评价，里面有中文标点、英文型号、数字、表情和乱七八糟的空格。我们试过手写正则、string、jieba，最后把 zhon 放进预处理层，效果更稳，也更好维护。