摘要： 1、谷歌浏览器的使用 下载谷歌浏览器 安装谷歌访问助手 终于用上谷歌浏览器了。。。。。激动 问题：处理页面动态加载数据的爬取 -1.selenium -2.phantomJs 1.selenium 下载好后选择相应版本解压后粘贴到项目文件夹下 把谷歌浏览器设置成默认的浏览器 在jupyter下载模块 阅读全文

摘要： 引言：回顾requests实现数据爬取的流程 指定url 基于requests模块发起请求 获取响应对象中的数据 进行持久化存储 其实，在上述流程中还需要较为重要的一步，就是在持久化存储之前需要进行指定数据解析。因为大多数情况下的需求，我们都会指定去使用聚焦爬虫，也就是爬取页面中指定部分的数据值，而 阅读全文

摘要： 代理和cookie操作 代理和cookie操作 一.基于requests模块的cookie操作 引言：有些时候，我们在使用爬虫程序去爬取一些用户相关信息的数据（爬取张三“人人网”个人主页数据）时，如果使用之前requests模块常规操作时，往往达不到我们想要的目的，例如： cookie会话跟踪技术， 阅读全文

摘要： requests模块 - 基于如下5点展开requests模块的学习 什么是requests模块 requests模块是python中原生的基于网络请求的模块，其主要作用是用来模拟浏览器发起请求。功能强大，用法简洁高效。在爬虫领域中占据着半壁江山的地位。 为什么要使用requests模块 因为在使用 阅读全文

摘要： 一.urllib库 概念：urllib是Python自带的一个用于爬虫的库，其主要作用就是可以通过代码模拟浏览器发送请求。其常被用到的子模块在Python3中的为urllib.request和urllib.parse，在Python2中是urllib和urllib2。 使用流程： 指定url 基于u 阅读全文

摘要： 什么是爬虫 爬虫就是通过编写程序模拟浏览器上网，然后让其去互联网上抓取数据的过程。 哪些语言可以实现爬虫 1.php：可以实现爬虫。php被号称是全世界最优美的语言（当然是其自己号称的，就是王婆卖瓜的意思），但是php在实现爬虫中支持多线程和多进程方面做的不好。 2.java：可以实现爬虫。java 阅读全文

摘要： https://promotion.aliyun.com/ntms/act/campus2018.html 云翼计划 1、自己写了一个博客系统，需要放在云服务器上试试，选择了阿里云-云翼计划-享受学生优惠 创建阿里云账号，完成实名认证和学生认证 搭建说明文档 我选择如图： 支付成功后进入管理控制台 阅读全文

摘要： https://mp.weixin.qq.com/s?src=11&timestamp=1543302553&ver=1269&signature=NAX65qusuVVDEl66kp60yPU-CGNW85R*qxllygQmYOh3BIYyWYcmKDa0kY6RagOLrC2SJvNKEV5- 阅读全文

摘要： 2、 b a 1 2 hello python decorator 3、 A 第一次打印结果是一个对象 B 第二次打印结果是acd19 C 第三次打印结果是('cd', '9') D 第四次打印结果是{'n1': 'cd', 'n2': '9'} 4、 阅读全文

摘要： 一、基本要求 作业题目：开发BBS+BLOG系统 作业需求: 评论处、上传文章处都要防止xss攻击--凡是向网站输入内容的都要防止 博客系统开发： 演示内容， 1、注册输入为空，输入已注册过的信息提交 2、登录为空、输入错误提交 3、展示首页 注销--重新输入 4、个人站点--展示--进入文章详情页 阅读全文