10 2020 档案

摘要:Python3利用Chrome的--headless爬取动态页面内容(推荐) 利用Chrome浏览器的--headless爬取页面的动态内容: 1,下载与浏览器匹配的chromdriver.exe,并将文件拷贝到python的Scripts的目录下(已配置环境变量path的); 2,示例: from 阅读全文
posted @ 2020-10-26 11:19 整合侠 阅读(677) 评论(0) 推荐(0) 编辑
摘要:Linux DNS配置 问题: 使用yum命令的时候若出现:"Could not resolve host: mirrors.aliyun.com; 未知的错误" 原因: 因无法解析域名,需要配置域名解析服务器。 解决方案: echo "nameserver 8.8.8.8" >> /etc/res 阅读全文
posted @ 2020-10-20 10:30 整合侠 阅读(221) 评论(0) 推荐(0) 编辑
摘要:selenium+PhantomJS爬取网页动态加载内容 一般我们使用python的第三方库requests及框架scrapy来爬取网上的资源,但是设计javascript渲染的页面却不能抓取,此时,我们使用web自动化测试化工具Selenium+无界面浏览器PhantomJS来抓取javascri 阅读全文
posted @ 2020-10-16 16:06 整合侠 阅读(922) 评论(0) 推荐(0) 编辑
摘要:调用PhantomJS异常:Sessions clean-up phase starting NOW 问题: 调用PhantomJS异常:Sessions clean-up phase starting NOW 解决方案: Java: DesiredCapabilities dcap = new D 阅读全文
posted @ 2020-10-16 15:59 整合侠 阅读(225) 评论(0) 推荐(0) 编辑
摘要:pipenv的使用 pipenv是一个python包管理工具,它能同时管理python虚拟环境和python依赖,官方推荐。 常用命令 pipenv的安装 $ pip install pipenv 创建环境 $ pipenv install --python3.6.7 --dev 上述的命令会生成P 阅读全文
posted @ 2020-10-15 14:49 整合侠 阅读(427) 评论(0) 推荐(0) 编辑
摘要:一、yaml文件介绍 yaml是一个专门用来写配置文件的语言。 1. yaml文件规则 区分大小写; 使用缩进表示层级关系; 使用空格键缩进,而非Tab键缩进 缩进的空格数目不固定,只需要相同层级的元素左侧对齐; 文件中的字符串不需要使用引号标注,但若字符串包含有特殊字符则需用引号标注; 注释标识为 阅读全文
posted @ 2020-10-15 13:41 整合侠 阅读(625) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示