水墨黑

摘要： scrapy选择器的用法 //selector可以加可以不加 response.selector.xpath("//title/text()").extract_first() response.selector.css("title::text").extract_first() response.xpath("//title/text()").extract_first() re... 阅读全文

摘要： 1.mysql数据库 2.mongoDB数据库 3.redis数据库 1.创建项目 scrapy startproject myproject cd myproject 2.创建爬虫 scrapy genspider myspider www.baidu.com scrapy genspider -t crawl myspider www.baidu.com----创建有rules... 阅读全文

摘要： 1.创建scrapy项目 dos窗口输入: 2.编写item.py文件(相当于编写模板,需要爬取的数据在这里定义) 3.创建爬虫文件 dos窗口输入: 4.编写myspider.py文件(接收响应,处理数据) 5.编写pipelines.py(存储数据) 6.编写settings.py(设置head 阅读全文

摘要： 1.创建scrapy项目 dos窗口输入: 2.编写item.py文件(相当于编写模板,需要爬取的数据在这里定义) 3.创建爬虫文件 dos窗口输入: 4.编写myspider.py文件(接收响应,处理数据) 5.编写pipelines.py(存储数据) 存储到mysql 改进版: 存储到mongo 阅读全文

摘要： 开心网 十秒加入开心网,找到全部好友 ... 阅读全文

摘要： ''' #文档类型 html #文档语言 #网页头文件 #编码方式 网页标题 #网页显示的内容全在body里面 一级标题 #加id 方便链接跳转 一级标题 一级标题 一级标题 一级标题 一级标题 段落,小tips:段落之间不是紧密连接的 #换行 &nbsp #空格 &lt #less then 小于号 表示块,跟段落... 阅读全文

摘要： 显示时间 date 显示日历cal 变换目录 cd 显示当前所在目录 pwd 建立新目录 mkdir -p a/b/c 删除空目录 rmdir 当前目录下文件和目录显示 ls 复制 cp 文件 路径 移除档案或目录 rm 文件名 移动文件或目录 mv 文件名 路径 读文件内容cat 文件名(从第一行 阅读全文

摘要： 题目1:二维数组的查找 题目:在一个二维数组中（每个一维数组的长度相同），每一行都按照从左到右递增的顺序排序，每一列都按照从上到下递增的顺序排序。请完成一个函数，输入这样的一个二维数组和一个整数，判断数组中是否含有该整数。 题目2:替换空格 题目:请实现一个函数，将一个字符串中的每个空格替换成“%2 阅读全文

摘要： 什么是封装？ 所谓的面向对象就是将我们的程序模块化，对象化，把具体事物的特性属性和通过这些属性来实现一些动作的具体方法放到一个类里面，这就是封装。封装是我们所说的面相对象编程的特征之一。除此之外还有继承和多态。 什么是继承？ 继承有点类似与我们生物学上的遗传，就是子类的一些特征是来源于父类的，儿子遗 阅读全文

摘要： from selenium import webdriver from selenium.webdriver.common.by import By from selenium.webdriver.common.keys import Keys from selenium.webdriver.support import expected_conditions as EC from seleni... 阅读全文