自己有自己的调调、

摘要： 1、简介： Go与众不同的特性之一就是函数和方法可返回多个值。这种形式可以改善C中一些笨拙的习惯： 将错误值返回（例如用 `-1` 表示 `EOF`）和修改通过地址传入的实参。 函数是组织好的、可重复使用的、用于执行指定任务的代码块。支持函数、匿名函数和闭包。 2、函数定义 Go语言中定义函数使用f 阅读全文

摘要： 1、简介 映射是方便而强大的内建数据结构，它可以关联不同类型的值。其键可以是任何相等性操作符支持的类型， 如整数、浮点数、复数、字符串、指针、接口（只要其动态类型支持相等性判断）、结构以及数组。 切片不能用作映射键，因为它们的相等性还未定义。与切片一样，映射也是引用类型。 若将映射传入函数中，并更改 阅读全文

摘要： 1、校花网图片爬取 实现： 1.爬虫文件中将图片名称和地址获取，封装到item中，将item提交给管道 2.定义一个新的管道，在新的管道中进行图片的请求和持久化存储 需要事先配置文件中进行：IMAGES_STORE = './dirName' 创建scrapy项目 scrapy startproje 阅读全文

摘要： 1、持久化存储 爬取一页糗事百科数据 1.1、爬虫文件中进行数据解析 spiderName.py import scrapy class QiubaiSpider(scrapy.Spider): name = 'qiubai' start_urls = ['https://www.qiushibai 阅读全文

摘要： 错误提示 redis.exceptions.DataError: Invalid input of type: 'QiubaiproItem'. Convert to a bytes, string, int or float first. 原因： Python的第三方库redis升级到3.0后仅接 阅读全文

摘要： 前言 随着移动市场的火热，各大平台都陆陆续续的推出了自己的移动端APP来拉拢吸引和便捷其广大的用户。在移动端的平台当时势必会出现大量有价值的信息和数据 概要 fiddler简介 手机APP抓包设置 fiddler设置 安装证书下载 安全证书安装 局域网设置 fiddler手机抓包测试 1 、什么是F 阅读全文

摘要： 1、.什么是Scrapy? Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架，非常出名，非常强悍。所谓的框架就是一个已经被集成了各种功能(高性能异步下载，队列，分布式，解析，持久化等)的具有很强通用性的项目模板。 - Scrapy内容 - 基于框架发起请求 - 数据解析 - 持久化 阅读全文

摘要： 1、案例需求：爬取空气质量数据 URL：https://www.aqistudy.cn/html/city_detail.html 2、分析思路： 1.页面中是有相关的查询条件，指定查询条件后点击查询按钮，就会加载出相关的数据。 查询的条件： 城市名称 查询的时间范围 当点击了查询按钮后，整张页面没 阅读全文

摘要： 1、切片介绍 数组虽然有适用它们的地方，但是数组不够灵活，因此在Go代码中数组使用的并不多。 但是，切片则使用得相当广泛。切片基于数组构建，但是提供更强的功能和便利。 和数组不同的是，切片类型并没有给定固定的长度。 2、切片 切片（Slice）是一个拥有相同类型元素的可变长度的序列。它是基于数组类型 阅读全文

摘要： 一组连续的操作就是动作链 滑动：鼠标点击长按之后进行偏移 1、示例代码引入 from selenium import webdriver from time import sleep from selenium.webdriver import ActionChains #动作链 # 实例化一个浏览 阅读全文