10 2022 档案

Python 操作Excel-openpyxl模块使用
摘要：openpyxl 的用法实例 1.1 Openpyxl 库的安装使用 openpyxl 模块是一个读写 Excel 2010 文档的 Python 库，如果要处理更早格式的 Excel 文 档，需要用到额外的库，openpyxl 是一个比较综合的工具，能够同时读取和修改 Excel 文档。 其他很多 阅读全文
posted @ 2022-10-18 22:51 尘世风 阅读(1248) 评论(0) 推荐(0)
Python-数据的多种存储形式
摘要：1 JSON 文件存储 JSON，全称为 JavaScript Object Notation, 也就是 JavaScript 对象标记，它通过对象和数组的组合来表示数据，构造简洁但是结构化程度非常高，是一种轻量级的数据交换格式。本节中，我们就来了解如何利用 Python 保存数据到 JSON 文件 阅读全文
posted @ 2022-10-18 15:08 尘世风 阅读(303) 评论(0) 推荐(0)
PyQuery详解
摘要：为什么选择PyQuery？ Python爬虫解析库，主流的有 PyQuery Beautifulsoup Scrapy Selectors 正则表达式。 PyQuery和scrapy Selectors都是基于lxml模块，而lxml和正则表达式都是C语言写的，只有Beautifulsoup是用纯P 阅读全文
posted @ 2022-10-18 11:30 尘世风 阅读(163) 评论(0) 推荐(0)
爬虫的基本原理
摘要：一、爬虫的基本原理 网络爬虫的价值其实就是数据的价值，在互联网社会中，数据是无价之宝，一切皆为数据，谁拥有了大量有用的数据，谁就拥有了决策的主动权。 爬虫聚合站点 https://qbt4.mobduos.com/promote/pc/?code=339115928&utm=339115928 ht 阅读全文
posted @ 2022-10-14 20:41 尘世风 阅读(594) 评论(0) 推荐(0)
python3 http.server模块 搭建简易 http 服务器
摘要：在命令行直接运行： python -m http.server 80 或 python3 -m http.server 80 会看到如下输出： Serving HTTP on 0.0.0.0 port 80 (http://0.0.0.0:80/) ... 在浏览器访问会展示运行命令所在目录下的文件 阅读全文
posted @ 2022-10-13 14:18 尘世风 阅读(1732) 评论(0) 推荐(0)
Python爬虫-scrapyd框架部署
摘要：爬虫项目部署 1 脚本文件部署 linux内置的cron进程能帮我们实现这些需求，cron搭配shell脚本，非常复杂的指令也没有问题。 1.1 crontab的使用 crontab [-u username] //省略用户表表示操作当前用户的crontab -e (编辑工作表) -l (列出工作表 阅读全文
posted @ 2022-10-11 20:05 尘世风 阅读(239) 评论(0) 推荐(0)
Python爬虫-Scrapy-Redis分布式
摘要：Scrapy-Redis 分布式 1 分布式概述 1.0 scrapy-redis是什么 之前我们已经学习了Scrapy，它是一个通用的爬虫框架，能够耗费很少的时间就能够写出爬虫代码 Scrapy-redis是scrapy的一个组件，它使用了Redis数据库做为基础，目的为了更方便地让Scrapy实 阅读全文
posted @ 2022-10-09 21:17 尘世风 阅读(1411) 评论(0) 推荐(0)
“Navicat Premium”已损坏,无法打开， 您应该将它移到废纸篓的解决办法
摘要：在打开软件的时候遇到这种情况下按以下操作 1）首先在设置中找安全与隐私然后在通用里面找到下面 的图片 如果没有设置任何来源，那把小锁打开，添加一下任何来源。在尝试安装 2.如果还不行，在终端粘贴复制输入命令： sudo xattr -r -d com.apple.quarantine 输入玩这个命令 阅读全文
posted @ 2022-10-09 20:41 尘世风 阅读(1947) 评论(0) 推荐(0)
Python 爬虫-feapder 框架简介
摘要：feapder 框架 学习目标 掌握便捷式框架操作流程 掌握请求钩子结构使用 掌握框架项目搭建流程 掌握数据入库与去重 1 简介 国内文档：https://boris-code.gitee.io/feapder feapder 是一款上手简单，功能强大的Python爬虫框架，使用方式类似scrapy 阅读全文
posted @ 2022-10-07 20:21 尘世风 阅读(1199) 评论(0) 推荐(0)

*/