上一页 1 ··· 25 26 27 28 29 30 31 32 33 ··· 74 下一页

写Python爬虫遇到的一些坑 转载:https://mp.weixin.qq.com/s/kfxJ7EKFeunGcjvBr0l7ww

摘要: 毕业论文缺了点数据,于是去爬了下某猫投诉。想想上次写爬虫还是一年前大数据课程的时候。这次写也依旧遇到了一些坑,有Python本身的,有爬虫的,于是记录下。 1.Unicode字符编码问题 这段数据我是从summary,即摘要开始看的,summary的内容都是\xxxxx。summary内容: \u5 阅读全文
posted @ 2021-07-14 21:51 我和你并没有不同 阅读(510) 评论(0) 推荐(0) 编辑

Selenium 爬取淘宝商品 转载:https://mp.weixin.qq.com/s/7aul82HqxszH5jH9pSpZrA

摘要: 引入相关的包 import osfrom urllib.parse import unquoteimport pandas as pdfrom selenium import webdriverfrom selenium.webdriver.common.by import By 使用 seleni 阅读全文
posted @ 2021-07-14 21:49 我和你并没有不同 阅读(382) 评论(0) 推荐(0) 编辑

tst

摘要: ,lv3_cat_name,key_word,required,SearchUrl,total0,硒鼓,硒鼓,yes,https://s.taobao.com/search?q=硒鼓&tab=mall&bcoffset=0&p4ppushleft=%2C44&s=0,110988.01,服务器/工作 阅读全文
posted @ 2021-07-12 17:04 我和你并没有不同 阅读(57) 评论(0) 推荐(0) 编辑

Istio

摘要: Istio是啥?一文带你彻底了解!http://www.uml.org.cn/wfw/201909063.asp 阅读全文
posted @ 2021-07-12 10:52 我和你并没有不同 阅读(22) 评论(0) 推荐(0) 编辑

拒绝反爬虫!教你搞定爬虫验证码 转载:https://mp.weixin.qq.com/s/WSG-qQgKiAit5Pua7XQGZg

摘要: 使用验证码可以防止应用或者网站被恶意注册、攻击,对于网站、APP而言,大量的无效注册、重复注册甚至是恶意攻击很令人头痛。使用验证码能够很大程度上减少这些恶意操作。验证码变得越来越复杂,爬虫的工作也变得越发艰难。有时候我们必须通过验证码的验证才能够访问页面(如图1所示)。 图1 验证码界面 目前主流的 阅读全文
posted @ 2021-06-21 09:19 我和你并没有不同 阅读(1185) 评论(0) 推荐(0) 编辑

解决Mac连接移动硬盘为只读状态 转载: https://blog.csdn.net/adsl624153/article/details/99094809

摘要: 解决Mac连接移动硬盘为只读状态1、问题描述由于移动硬盘默认是NTFS类型,导致连接Mac后,使用访达打开为只读状态。这样就无法进行新增和删除文件的的操作。 2、解决办法使用命令将移动硬盘的目录重新挂载到当前用户下的目录即可。 #记录Device Nodediskutil info /Volumes 阅读全文
posted @ 2021-06-01 14:04 我和你并没有不同 阅读(1330) 评论(0) 推荐(0) 编辑

一文读懂Python web框架和web服务器之间的关系 转载:https://mp.weixin.qq.com/s/xgZ6ZkARrhtId0kBdbmgNA

摘要: 我们都知道 Python 作为一门强大的语言,能够适应快速原型和较大项目的制作,因此被广泛用于 web 应用程序的开发中。 在面试的过程中,大家或多或少都被问到过这样一个问题:一个请求从浏览器发出到数据返回都经历过哪些过程? 要回答这个问题,首先你需要对 HTTP 协议、web框架、服务器等底层知识 阅读全文
posted @ 2021-05-27 09:36 我和你并没有不同 阅读(439) 评论(0) 推荐(0) 编辑

用 Python 登录主流网站 转载:https://mp.weixin.qq.com/s/QqYAXTxj2gK0ehXfpdNrOA

摘要: 不论是自然语言处理还是计算机视觉,做机器学习算法总会存在数据不足的情况,而这个时候就需要我们用爬虫获取一些额外数据。 这个项目介绍了如何用 Python 登录各大网站,并用简单的爬虫获取一些有用数据,目前该项目已经提供了知乎、B 站、和豆瓣等 18 个网站的登录方法。 项目地址: https://g 阅读全文
posted @ 2021-05-26 20:01 我和你并没有不同 阅读(470) 评论(0) 推荐(0) 编辑

k8s 面试题

摘要: 简述etcd及其特点etcd是CoreOS团队发起的开源项目,是一个管理配置信息和服务发现(service discovery)的项目,它的目标是构建一个高可用的分布式键值(key-value)数据库,基于Go语言实现。特点: 简单:支持REST风格的HTTP+JSON API 安全:支持HTTPS 阅读全文
posted @ 2021-05-26 19:59 我和你并没有不同 阅读(230) 评论(0) 推荐(0) 编辑

postman 转载:https://mp.weixin.qq.com/s/GscJGcR-2luk5N5Z7797dw

摘要: postman是一款支持http协议的接口调试与测试工具,其主要特点就是功能强大,使 用简单且易用性好 。 无论是开发人员进行接口调试,还是测试人员做接口测试,postman都是我们的首选工具之一 。那么接下来就介绍下postman到底有哪些功能,它们分别都能干些什么 。下面先通过一张图来直观的来看 阅读全文
posted @ 2021-05-26 19:58 我和你并没有不同 阅读(411) 评论(0) 推荐(0) 编辑
上一页 1 ··· 25 26 27 28 29 30 31 32 33 ··· 74 下一页