随笔分类 - python
摘要:1. 安装:pip install scrapydweb 2. 启动:scrapydweb 第一次执行,当前目录会生产配置文件:scrapydweb_settings_v8.py 配置账户和密码: 配置文件: 3. 界面:功能强大、还支持移动端 参考资料:https://github.com/my8
阅读全文
摘要:1. 安装服务器: pip install scrapyd 启动: scrapyd 访问:127.0.0.1:6800 2. 安装客户端 pip install scrapyd-client 3. 进入爬虫项目根目录:找到 scrapy.cfg 文件 修改如下 4. 发布项目 scrapyd-dep
阅读全文
摘要:、1.下载https://wkhtmltopdf.org/downloads.html 2.安装依赖: sudo apt-get install libxfont1 xfonts-encodings xfonts-utils xfonts-base xfonts-75dpi 3.安装wkhtmlto
阅读全文
摘要:1. chromedriver 下载地址: https://npm.taobao.org/mirrors/chromedriver 在这里找到对应的驱动 2. 安装谷歌浏览器 2.1 安装依赖 2.2 下载Chrome安装包 2.3 安装 3. 安装chromedriver 找到和浏览器对应的驱动
阅读全文
摘要:1. 安装 yum install supervisor 2.配置 2.2 项目的配置 3.启动 参考资料: https://blog.csdn.net/zou79189747/article/details/80403016 http://www.cnblogs.com/zhoujinyi/p/6
阅读全文
摘要:1. 介绍: threading用于提供线程相关的操作,线程是应用程序中工作的最小单元。python当前版本的多线程库没有实现优先级、线程组,线程也不能被停止、暂停、恢复、中断。 2. 1 线程执行函数 2.2 线程继承类 3.介绍: 构造方法: Thread(group=None, target=
阅读全文
摘要:1.phantomjs 安装 下载:http://phantomjs.org/download.html 解压: 重命名: 软连接: [root@izuf622gt8apcfsz7i1mqdz /]# phantomjsphantomjs> 2.selenium 安装 pip 安装: pip ins
阅读全文
摘要:一、找到安装Apache的目录/usr/local/apache2/conf,并对httpd.conf配置文件进行修改 1.加载cgi模块 去掉注释: LoadModule cgid_module modules/mod_cgid.so #//当使用内置模块prefork.c 时动态加载cgi_mo
阅读全文
摘要:1.获取当前时间戳 2.格式化日期 time.localtime() 返回当前时间的: 解析: 自定义格式化日期 3.日期转换为时间戳 a='2017-05-07 10:13:28'print time.mktime(time.strptime(a,'%Y-%m-%d %H:%M:%S')) 结果:
阅读全文