转 中文分词 一小部分,明天继续研究
摘要:
为何要中文分词: 说到为何要中文分词有必要将中文和英文对比一下,英文中对于“词”有天然的空格区分,而中文中只有短句使用标点符号区分(远古的时候的文章连标点都无)——所以古文有断句一说。中文分词的作用即是在短语中增加人工的空格如“SAP是大型ERP软件”分为“SAP 是大型 ERP 软件”,目前我们常接触这种技术是MS Office中的Word,在一段文字上做双击操作时会选中一个词而在记事本中同样的... 阅读全文
posted @ 2007-03-28 17:32 flashicp 阅读(307) 评论(0) 推荐(0) 编辑