摘要: 安装 python -m pip install jupyter 配置 2.1 生成配置文件 jupyter notebook --generate-config 2.2 生成登录密码 python3 -c 'from notebook.auth import passwd; print(passw 阅读全文
posted @ 2021-05-12 22:07 呓语i 阅读(88) 评论(0) 推荐(0) 编辑
摘要: 罗翔老师出的书,写一些读后感。 1. 刑法的起源和发展 天、兵、契约、定分止争、正义、防卫、"苗民" 以前感觉刑罚是 惩罚错误行为 的一种手段,统治者为了规范人民的生活,规定了 正确 和 错误 的行为, 为了保证 错误行为 尽量少的发生,使人民有 畏惧感。 2. 反反复复的肉刑兴废 奴隶制旧五刑:墨 阅读全文
posted @ 2021-04-03 13:53 呓语i 阅读(993) 评论(0) 推荐(0) 编辑
摘要: 常识思维带来的四大误区 1. 用常识解释个体行为 导致器官捐献率不同的原因 被忽视的默认选项 理性选择其实是偏好选择 到处都是“看不见的大猩猩” 注重相关性,而非因果性 填充想象,人类思考的本质 如果我们从结果反推原因,我们会发现很多原因在其他的结果中也出现过,但是我们只会看到我们希望看到的原因。我 阅读全文
posted @ 2021-04-03 13:51 呓语i 阅读(93) 评论(0) 推荐(0) 编辑
摘要: Aggregate 使用Mongodb内置的原生操作,聚合效率非常高类似于SQL Group By 操作。 每个阶段管道限制为100MB的内存 SQL Mongodb where $match group by $group having $match selet $project order by 阅读全文
posted @ 2020-12-04 19:02 呓语i 阅读(109) 评论(0) 推荐(0) 编辑
摘要: 读取目录下的csv文件,写入同一个excel文件的不同的sheet中。 import xlsxwriter as xlwt import os to_file_name = "" csv_path = "" workbook = xlwt.Workbook(to_file_name) # 新建一个工 阅读全文
posted @ 2020-11-19 10:26 呓语i 阅读(164) 评论(0) 推荐(0) 编辑
摘要: 通过Scrapy的自有文件我们可以看到内置的UserAgent是如何设置的 scrapy.downloadermiddlewares.useragent.UserAgentMiddleware """Set User-Agent header per spider or use a default 阅读全文
posted @ 2020-10-21 17:32 呓语i 阅读(260) 评论(0) 推荐(0) 编辑
摘要: docs Spider中间件启用,setting.py文件 SPIDER_MIDDLEWARES = { 'crawler.middlewares.CrawlerSpiderMiddleware': 543, } from scrapy import signals class CrawlerSpi 阅读全文
posted @ 2020-10-21 17:07 呓语i 阅读(850) 评论(0) 推荐(0) 编辑
摘要: logrotate vim /etc/logrotate.d/nginx /usr/local/nginx/logs/*.log { daily # 指定转储周期为每天 rotate 7 # 保留7份 missingok # 如果日志丢失,不报错继续滚动下一个日志 notifempty # 当日志文 阅读全文
posted @ 2020-10-12 18:01 呓语i 阅读(142) 评论(0) 推荐(0) 编辑
摘要: Logrotate是基于CRON来运行的,其脚本是/etc/cron.daily/logrotate,实际运行时,Logrotate会调用配置文件/etc/logrotate.conf. 重要参数说明 compress #通过gzip 压缩转储以后的日志 nocompress #不做gzip压缩处理 阅读全文
posted @ 2020-10-12 17:59 呓语i 阅读(94) 评论(0) 推荐(0) 编辑
摘要: GitHub 安装 pip install gevent grequests import grequests urls = [ 'http://www.heroku.com', 'http://python-tablib.org', 'http://httpbin.org', 'http://py 阅读全文
posted @ 2020-09-26 19:04 呓语i 阅读(155) 评论(0) 推荐(0) 编辑