摘要:
解决Scrapy-Redis爬取完毕之后继续空跑的问题 1. 背景 根据scrapy-redis分布式爬虫的原理,多台爬虫主机共享一个爬取队列。当爬取队列中存在request时,爬虫就会取出request进行爬取,如果爬取队列中不存在request时,爬虫就会处于等待状态,行如下: E:\Minic 阅读全文
摘要:
SeleniumHQ官方项目:https://github.com/seleniumHQ/docker-selenium 项目目前快速迭代中。 Selenium 这里主要针对的是 Selenium Grid,它用于分布式自动化测试,就是一套Selenium 代码可在不同的环境上运行。刚好,Docke 阅读全文
摘要:
代码 执行 python sendDisableProperty_value_back_id.py a b c result ['sendDisableProperty_value_back_id.py', 'a', 'b']3filename: sendDisableProperty_value_ 阅读全文
摘要:
版权声明:转载请标明原文链接。 https://blog.csdn.net/happy_85/article/details/71302220 <!-- flowchart 箭头图标 勿删 --> CPU.xxx cpu.idle cpu.idle表示除硬盘IO等待时间以外其它等待时间,这个值越大, 阅读全文
摘要:
安装 安装命令 git clone https://github.com/wg/wrk ll cd wrk/ ll make ll cp wrk /usr/local/sbin/ 帮助 wrk 使用方法: wrk <选项> <被测HTTP服务的URL> Options: -c, --connecti 阅读全文
摘要:
UPDATE和REPLACE基本类似,但是它们之间有两点不同。 首先查重,1. 当没有找到匹配记录(不存在重复记录)时: UPDATE什么都不做, REPLACE会做insert动作。2. 当找到匹配记录(存在重复记录)时: UPDATE可以更新记录的一部分字段。 REPLACE将已存在记录彻底删除 阅读全文
摘要:
http://blog.sina.com.cn/s/blog_905f3dd60102xyih.html https://blog.csdn.net/qq_40147863/article/details/82289463 https://www.cnblogs.com/haoliansheng/p 阅读全文
摘要:
日志查看 cat running.* | grep “2019-06-25” | grep "sku_id:10000" | wc -l cat -n running.log |grep "2019-06-25 05:00" |grep "access ip" |morecat -n running 阅读全文
摘要:
https://pypi.org/project/mechanize/ https://www.baidu.com/s?ie=utf-8&f=8&rsv_bp=1&tn=baidu&wd=wrk压力测试%20&oq=wrk%25E5%258E%258B%25E5%258A%259B%25E6%25B 阅读全文
摘要:
tensorflow安装 需要安装python36 64位 ImportError: No module named 'sklearn'或ImportError: No module named 'scipy'等 pip install --upgrade scipy pip install --u 阅读全文