2019 年 8月随笔档案 - 吱吱了了

2. kafka

摘要：目录: 1.kafka概念 2.kafka使用场景 3.相关术语 4.原理解析 5.项目实战一. kafka是什么 https://www.jianshu.com/p/014af2b34159 Kafka是一个分布式消息队列，它将数据分区保存，并将每个分区保存成多份以提高数据可靠性。Kafka是在阅读全文

posted @ 2019-08-30 16:31 吱吱了了阅读(267) 评论(0) 推荐(0) 编辑

1. 消息队列

摘要：一. 框架二. 什么是消息队列我们可以把消息队列比作是一个存放消息的容器，当我们需要使用消息的时候可以取出消息供自己使用。消息队列是分布式系统中重要的组件，使用消息队列主要是为了通过异步处理提高系统性能和削峰、降低系统耦合性。目前使用较多的消息队列有ActiveMQ，RabbitMQ，Kafka 阅读全文

posted @ 2019-08-30 16:20 吱吱了了阅读(269) 评论(0) 推荐(0) 编辑

jupyter notebook在启动时kernel一直在busy , 无法print

摘要：转: https://blog.csdn.net/loovelj/article/details/82184223 一. 问题: 内核一直显示忙碌，连简单的print都不能执行了。然后看后台，最后说”signal only works in main thread” 5、查询了很多网站，最后发现是两阅读全文

posted @ 2019-08-27 17:53 吱吱了了阅读(5862) 评论(0) 推荐(1) 编辑

pandas里面过滤列出现ValueError: cannot index with vector containing NA / NaN values错误的解决方法(转)

摘要：###df_18的字段fuek是否包含 / df_18[df_18['fuel'].str.contains('/')] 报错: ValueError Traceback (most recent call last) in () 1 # 检查是否已删除 > 2 df_18[df_18['fuel' 阅读全文

posted @ 2019-08-27 16:59 吱吱了了阅读(3200) 评论(0) 推荐(0) 编辑

NLP学习(5)----attention/ self-attention/ seq2seq/ transformer

摘要：目录: 1. 前提 2. attention (1)为什么使用attention (2)attention的定义以及四种相似度计算方式 (3)attention类型(scaled dot-product attention \ multi-head attention) 3. self-attent 阅读全文

posted @ 2019-08-27 11:52 吱吱了了阅读(1965) 评论(0) 推荐(1) 编辑

NLP学习(4)----word2vec模型

摘要：一. 原理哈弗曼树推导: https://www.cnblogs.com/peghoty/p/3857839.html 负采样推导: http://www.hankcs.com/nlp/word2vec.html https://github.com/kmkolasinski/deep-learn 阅读全文

posted @ 2019-08-26 11:12 吱吱了了阅读(408) 评论(0) 推荐(0) 编辑

Pytohn笔记(31)----第三方包

摘要：摘自: https://www.jianshu.com/p/bbc8672a2d09 一. from __future__ import **** [版本更新之后想在原来的版本使用新版本的一些功能] 二. python zipfile使用 1、压缩 f=zipfile.ZipFile(file, m 阅读全文

posted @ 2019-08-26 10:47 吱吱了了阅读(218) 评论(0) 推荐(0) 编辑

改进Bert----spanBERT

摘要：SpanBert：对 Bert 预训练的一次深度探索 SpanBERT: Improving Pre-training by Representing and Predicting Spans 解读SpanBERT:《Improving Pre-training by Representing an 阅读全文

posted @ 2019-08-19 19:08 吱吱了了阅读(1740) 评论(0) 推荐(0) 编辑

Python笔记(30)-----logger

摘要：转自: https://www.jb51.net/article/139080.htm logging模块介绍 Python的logging模块提供了通用的日志系统，熟练使用logging模块可以方便开发者开发第三方模块或者是自己的Python应用。同样这个模块提供不同的日志级别，并可以采用不同的方阅读全文

posted @ 2019-08-16 14:52 吱吱了了阅读(219) 评论(0) 推荐(0) 编辑

算法102----360笔试（m进制不进位相加最大值）

摘要：转自：https://blog.csdn.net/qq_18310041/article/details/99656445 阅读全文

posted @ 2019-08-15 21:59 吱吱了了阅读(346) 评论(0) 推荐(0) 编辑

python关于解决'\u'开头的字符串转中文的方法

摘要：转自: https://www.cnblogs.com/hahaxzy9500/p/7685955.html 字符串转中文: 但是以上有时还会报错: UnicodeEncodeError: 'ascii' codec can't encode characters in position 25-32 阅读全文

posted @ 2019-08-14 10:49 吱吱了了阅读(9253) 评论(0) 推荐(0) 编辑

conda create 报错解决

摘要：1. 输入命令: conda create -n query-scorer-serving python=2.7 报错: Solving environment: failed CondaError: No writable package cache directories found in (' 阅读全文

posted @ 2019-08-13 19:30 吱吱了了阅读(6287) 评论(0) 推荐(0) 编辑

flask参数传递

摘要：一. 参数传递两种方式: 1.get请求 request.args.get("key") 获取get请求参数2.post请求request.form.get("key", type=str, default=None) 获取表单数据request.values.get("key") 获取所有参数# 阅读全文

posted @ 2019-08-13 11:00 吱吱了了阅读(2133) 评论(0) 推荐(0) 编辑

算法101---反异或（字节跳动）

摘要：一、题目：二、思路：反异或若a^b=c则a=b^c 如：N = 7，K= 4，s = 1110100110【原来序列为1001010】则： 1 2 3 4 4 4 4 3 2 1 【一共10个数】这个列表代表异或次数。 1 0 0 1 0 1 0 1 0 0 1 0 1 0 1 0 0 1 0 阅读全文

posted @ 2019-08-11 20:30 吱吱了了阅读(1035) 评论(0) 推荐(0) 编辑

计算广告（6）----爱奇艺广告技术沙龙（广告召回）

摘要：爱奇艺技术沙龙——广告算法与架构设计-爱奇艺直播-爱奇艺一、AI在视频广告中的应用： 1、广告的目的：在一定周期，让尽可能多的人产生消费。长周期：品牌广告（比如阿迪、nike等品牌），短周期：效果广告（比如平时打开网页出现在眼帘的广告）。消费行为：购买、激活、安装、下载、点击。 2、如何传达阅读全文

posted @ 2019-08-10 23:40 吱吱了了阅读(1763) 评论(0) 推荐(0) 编辑

flask例子

摘要：1.例子: https://blog.csdn.net/z564359805/article/details/83474387 测试时: get方式: 比如port = 127.0.0.1,host = 5000 输入网址: http://127.0.0.1:5000/queryr/?query=汶阅读全文

posted @ 2019-08-09 11:29 吱吱了了阅读(320) 评论(0) 推荐(0) 编辑

flask安装

摘要：转载:https://www.cnblogs.com/lsdb/p/10488448.html 一:前提条件: 已经安装了Python3,本机环境是anaconda Python3.6 二:安装flask 三:第一个应用程序四:访问刚刚执行的代码: 访问：http://127.0.0.1:5000 阅读全文

posted @ 2019-08-09 11:15 吱吱了了阅读(216) 评论(0) 推荐(0) 编辑

tensorflow实战笔记（21）----tenserflow/serving

摘要：tensorflow serving (一)：运行官方例子 tensorflow serving (二)：发布自己的服务阅读全文

posted @ 2019-08-07 18:02 吱吱了了阅读(236) 评论(0) 推荐(0) 编辑

GPU显存释放

摘要：一、当程序没有运行，但GPU仍被占用，可通过nvidia-smi查看，被占用的pid是什么或通过sudo fuser -v /dev/nvidia* #查找占用GPU资源的PID 然后采用kill -9 (PID)来杀掉运行的进程阅读全文

posted @ 2019-08-05 14:34 吱吱了了阅读(1363) 评论(0) 推荐(0) 编辑

算法99---网易2019笔试

摘要：题一： '''判断一个列表中的每个数的左右两个数之和是否大于当前的数,如果是,就能成环;如果否,就不能成环''' 作者：NotDeep链接：https://www.nowcoder.com/discuss/216237来源：牛客网思路首先对数组进行排序，除了最后一个数字，都满足相邻两个数字大于自阅读全文

posted @ 2019-08-03 20:39 吱吱了了阅读(476) 评论(0) 推荐(0) 编辑

算法99---丰收（网易笔试）--二分查找

摘要：思路：加和+二分查找代码：阅读全文

posted @ 2019-08-03 13:32 吱吱了了阅读(204) 评论(0) 推荐(0) 编辑

算法98---瞌睡（网易笔试）

摘要：思路： """ 思路：从左到右遍历，比较k长度内睡着0状态对应兴趣值的和，即叫醒一下提升的兴趣值。总值分为两部分：醒着的固定值 + 睡着的提升值的最大值 """ 代码： # 加了下面的break语句，才使这个代码时间上终于达标 # 扫描到距结尾不足k距离范围内的第一个睡着状态即可，后面的肯定不如这阅读全文

posted @ 2019-08-03 13:05 吱吱了了阅读(212) 评论(0) 推荐(0) 编辑

08 2019 档案