交流_QQ_2240410488

2019年7月18日

摘要：报错描述- 代码逻辑大致是，开启线程，监听kafka生产者push的topic消息。- 问题出现在监听过程中，线程在接收几条topic之后出现报错，不再处理数据12报错代码Exception ignored in: <generator object _yield_value at 0x00 阅读全文

posted @ 2019-07-18 14:10 交流_QQ_2240410488 阅读(2165) 评论(0) 推荐(0) 编辑

5 分钟入门 Google 最强NLP模型：BERT

摘要： BERT (Bidirectional Encoder Representations from Transformers) 10月11日，Google AI Language 发布了论文 BERT: Pre-training of Deep Bidirectional Transformers f 阅读全文

posted @ 2019-07-18 11:13 交流_QQ_2240410488 阅读(579) 评论(0) 推荐(0) 编辑

2019年7月17日

对数几率回归

摘要：对数几率回归对数几率回归（logistic regression），又称为逻辑回归，虽然它的名字是“回归”，但实际却是一种分类学习方法，那为什么“回归”？个人觉得是因为它跟线性回归的公式有点关联。对数几率函数是sigmoid函数。 1､模型线性回归：z=w∗x+b z = w*x+ bz=w∗x+ 阅读全文

posted @ 2019-07-17 23:19 交流_QQ_2240410488 阅读(1018) 评论(0) 推荐(0) 编辑

数学上各种空间概念的关系图

摘要： https://blog.csdn.net/cc1949/article/details/79744519 数学上有各种空间，概念容易混淆，为了记忆，整理出一张关系图。目前不清楚无限维的内积空间是什么？也欢迎各位补充其他的概念。阅读全文

posted @ 2019-07-17 22:43 交流_QQ_2240410488 阅读(904) 评论(0) 推荐(0) 编辑

理解数学空间，从距离到希尔伯特空间

摘要：在数学中有许多空间表示，比如欧几里德空间、赋范空间、希尔伯特空间等。这些空间之间有什么关系呢？首先要从距离的定义说起。什么是距离呢？实际上距离除了我们经常用到的直线距离外，还有向量距离如Σni=1xi⋅yi−−−−−−−−√Σi=1nxi⋅yi，函数距离如∫ba(f(x)−g(x))2dx∫a 阅读全文

posted @ 2019-07-17 22:42 交流_QQ_2240410488 阅读(677) 评论(0) 推荐(0) 编辑

BERT大火却不懂Transformer？读这一篇就够了

摘要：大数据文摘与百度NLP联合出品编译：张驰、毅航、Conrad、龙心尘 https://mp.weixin.qq.com/s?__biz=MjM5MTQzNzU2NA==&mid=2651666707&idx=1&sn=2e9149ccdba746eaec687038ce560349&chksm=b 阅读全文

posted @ 2019-07-17 17:28 交流_QQ_2240410488 阅读(527) 评论(0) 推荐(0) 编辑

浅谈Transformer 及Attention网络

摘要： 1 Transformer 模型结构处理自然语言序列的模型有 rnn， cnn（textcnn），但是现在介绍一种新的模型，transformer。与RNN不同的是，Transformer直接把一句话当做一个矩阵进行处理，要知道，RNN是把每一个字的Embedding Vector输入进行，隐层节点阅读全文

posted @ 2019-07-17 17:27 交流_QQ_2240410488 阅读(720) 评论(0) 推荐(0) 编辑

BERT的通俗理解预训练模型微调

摘要： 1、预训练模型 BERT是一个预训练的模型，那么什么是预训练呢？举例子进行简单的介绍假设已有A训练集，先用A对网络进行预训练，在A任务上学会网络参数，然后保存以备后用，当来一个新的任务B，采取相同的网络结构，网络参数初始化的时候可以加载A学习好的参数，其他的高层参数随机初始化，之后用B任务的训练数阅读全文

posted @ 2019-07-17 16:51 交流_QQ_2240410488 阅读(3986) 评论(0) 推荐(0) 编辑

基于BERT预训练的中文命名实体识别TensorFlow实现

摘要： BERT-BiLSMT-CRF-NERTensorflow solution of NER task Using BiLSTM-CRF model with Google BERT Fine-tuningGitHub： https://github.com/macanv/BERT-BiLSTM-CR 阅读全文

posted @ 2019-07-17 16:38 交流_QQ_2240410488 阅读(4635) 评论(0) 推荐(0) 编辑

Attention is all your need 谷歌的超强特征提取网络——Transformer

摘要：过年放了七天假，每年第一件事就是立一个flag——希望今年除了能够将技术学扎实之外，还希望能够将所学能够用来造福社会，好像flag立得有点大了。没关系，套用一句电影台词为自己开脱一下——人没有梦想，和咸鱼有什么区别。闲话至此，进入今天主题：Transformer。谷歌于2017年提出Transfor 阅读全文

posted @ 2019-07-17 16:12 交流_QQ_2240410488 阅读(1069) 评论(0) 推荐(0) 编辑

劲风的味道

公告