如何实现文本内容查重（真实项目方案）

1.通过【结巴分词】进行关键词分词处理(使用idf词库)；

2.通过【余弦相似度】算法，计算关键词文本相识度。