摘要:
https://blog.csdn.net/nockinonheavensdoor/article/details/82320580 先看看简单例子: 1 2 3 4 5 6 7 用torch.tensor让list成为tensor: 1 2 3 4 5 自动求导设requires_grad=Tru 阅读全文
摘要:
如何运行Moses 1. Moses的历史 Moses是Pharaoh的升级版本,增加了许多功能。它是一个基于短语的统计机器翻译系统,整个系统用C++语言写成,从训练到解码完全开放源代码,可以运行在Linux平台和Windows平台。它有两大特点: 1.1 Factored Translation 阅读全文
摘要:
Q: 什么是Beam Search? 它在NLP中的什么场景里会⽤到? 传统的广度优先策略能够找到最优的路径,但是在搜索空间非常大的情况下,内存占用是指数级增长,很容易造成内存溢出,因此提出了beam search的算法。 beam search尝试在广度优先基础上进行进行搜索空间的优化(类似于剪枝 阅读全文
摘要:
源码下载的地址:https://github.com/fxsjy/jieba 演示地址:http://jiebademo.ap01.aws.af.cm/ 一 “结巴”中文分词:做最好的 Python 中文分词组件 。 支持三种分词模式:精确模式,试图将句子最精确地切开,适合文本分析;全模式,把句子中 阅读全文
摘要:
jieba“结巴”中文分词:做最好的 Python 中文分词组件 github:https://github.com/fxsjy/jieba 特点支持三种分词模式: 精确模式,试图将句子最精确地切开,适合文本分析;全模式,把句子中所有的可以成词的词语都扫描出来, 速度非常快,但是不能解决歧义;搜索引 阅读全文