huaobin

摘要： 词法分析 词是最小的能够独立运用的语言单位，因此，词法分析是其他一切自然语言处理问题（例如：句法分析、语义分析、文本分类、信息检索、机器翻译、机器问答等）的基础，会对后续问题产生深刻的影响。 而词法分析的任务就是：将输入的句子字串转换成词序列并标记出各词的词性。 值得注意的是，这里所说的“字”并不仅 阅读全文