摘要: 爬虫项目中遇到了一个POST请求,抓包显示请求头为 传输的数据为: 这种情况下直接通过data参数传入字典并不能得到正确响应,都是返回操作失败,问题就出在这个请求头上,这里我使用了https://httpbin.org/网站进行请求测试,使用了requests_toolbelt包的Multipart 阅读全文
posted @ 2021-12-02 10:31 BlackManZhang 阅读(1043) 评论(0) 推荐(0) 编辑
摘要: 这两天给新电脑安装环境后发现之前的代码不能进行mongodb数据库用户认证,报错如标题所示,查看一番后发现是pymongo的版本问题 在pymongo 3.9版本的时候进行用户认证代码如下: self.client = pymongo.MongoClient(host="127.0.0.1", po 阅读全文
posted @ 2021-12-01 17:38 BlackManZhang 阅读(11839) 评论(0) 推荐(2) 编辑
摘要: 今天要对之前的爬虫项目进行维护,打开后发现警告如下: 查看后发现这个方法将被弃用,包括find_element_by_id,xpath,class等方法,而会被find_element()方法所替代,而新的方法使用如下: driver.find_element(By.ID, "txtUserName 阅读全文
posted @ 2021-12-01 11:08 BlackManZhang 阅读(3866) 评论(0) 推荐(1) 编辑
摘要: The script scrapy is installed in ‘/home/xxx/.local/bin’ which is not on PATH. Consider adding this directory to PATH or, if you prefer to suppress th 阅读全文
posted @ 2020-10-07 13:10 BlackManZhang 阅读(5045) 评论(0) 推荐(0) 编辑
摘要: 声明:此文章仅为转载部署Hexo至个人云服务器。 原文章地址:https://zhuanlan.zhihu.com/p/120743882 服务器的购买与连接之类的部分暂不赘述,直接进入正题部分: 一.在服务器建立 Git 仓库 以下操作建立在 root 权限之下,如权限不足请申请 root 权限或 阅读全文
posted @ 2020-09-02 17:36 BlackManZhang 阅读(705) 评论(0) 推荐(0) 编辑
摘要: 如果你想在深度Deepin操作系统上搭建开发环境,本文教你安装Go的方法,同时附上Go环境变量配置的方法,总的来说,在深度系统中搭建Go开发环境只需要三个步骤,以下为你介绍。 第一步、Go安装包下载 我们在下载地址 https://golang.google.cn/dl/ 中下载go1.12.9.l 阅读全文
posted @ 2020-08-28 11:21 BlackManZhang 阅读(1613) 评论(0) 推荐(0) 编辑
摘要: pypi 镜像使用帮助 pypi 镜像每 5 分钟同步一次。 临时使用 pip install -i https://pypi.tuna.tsinghua.edu.cn/simple some-package 注意,simple 不能少, 是 https 而不是 http 设为默认 升级 pip 到 阅读全文
posted @ 2020-07-31 16:34 BlackManZhang 阅读(478) 评论(0) 推荐(0) 编辑
摘要: 源文件安装 在CentOS和Red Hat系统中,首先添加EPEL仓库,然后更新yum源: sudo yum install epel-release sudo yum update 然后安装Redis数据库: sudo yum -y install redis 安装好后启动Redis服务即可: s 阅读全文
posted @ 2020-07-24 12:05 BlackManZhang 阅读(265) 评论(0) 推荐(0) 编辑
摘要: 1.打开官网按照官网流程进行 mongodb官网:https://www.mongodb.com/ 2.配置程序包管理系统(yum) 创建一个/etc/yum.repos.d/mongodb-org-4.2.repo文件,以便您可以使用yum以下命令直接安装MongoDB : [mongodb-or 阅读全文
posted @ 2020-04-11 06:00 BlackManZhang 阅读(8375) 评论(0) 推荐(1) 编辑
摘要: 转载自(https://blog.csdn.net/weixin_44520259/article/details/93388802) 我想用redis来存储session,于是我在settings.py文件里做了如下设置: #将session的存储位置设为redis数据库 SESSION_ENGI 阅读全文
posted @ 2020-04-08 14:02 BlackManZhang 阅读(432) 评论(0) 推荐(0) 编辑