<9> 打包exe可执行程序
摘要：pip install pyinstaller 打包命令： # 普通打包 # pyinstaller -F py文件名称 # 执行exe可执行程序，会有cmd窗口被自动打开，记录程序运行日志 # 隐藏窗口打包 # pyinstaller -F -w py文件名称 # 替换自己的图标执行打包 # py
阅读全文
posted @
2022-12-09 06:49
不是霉蛋
阅读(25)
推荐(0) 编辑
<8> httpx基础
摘要：支持HTTP/2.0，异步 1.安装 pip install httpx[http2] 2.基本使用（类似requests） httpx 默认使用的 HTTP/1.1，需要手动声明才能使用HTTP/2.0 import httpx client = httpx.Client(http2=True)
阅读全文
posted @
2022-12-03 16:11
不是霉蛋
阅读(67)
推荐(0) 编辑
<7> 简体--繁体转换
摘要：# 安装# pip install opencc-python-reimplemented# t2s - 繁体转简体（Traditional Chinese to Simplified Chinese）# s2t - 简体转繁体（Simplified Chinese to Traditional C
阅读全文
posted @
2022-11-29 21:54
不是霉蛋
阅读(456)
推荐(0) 编辑
<6> 简易分布式
摘要：# produce端from loguru import logger from redis import StrictRedis class QuotesProduce: name = "start_urls" def __init__(self): self.redis_cli = Strict
阅读全文
posted @
2022-11-07 20:19
不是霉蛋
阅读(15)
推荐(0) 编辑
<5> 分布式实现
摘要：1 """ 2 配置 redis 3 安装 pip3 install scrapy-redis 4 修改scrapy项目(先正常实现scrapy爬虫): 5 """ 6 7 # 1 导入分布式爬虫类 8 from scrapy_ redis.spiders import RedisSpider, R
阅读全文
posted @
2022-11-07 20:14
不是霉蛋
阅读(26)
推荐(0) 编辑
<4> scrapy
摘要：1 """1.快捷保存CSV文件""" 2 3 # 例：scrapy crawl quotes -o quotes.csv 4 scrapy crawl 爬虫名 -o 保存的csv文件名 6 """2.运行方式""" 7 8 """方式一""" 9 from scrapy import cmdlin
阅读全文
posted @
2022-10-30 23:21
不是霉蛋
阅读(24)
推荐(0) 编辑
<3> selenium
摘要：1 """selenium""" 2 3 # 驱动浏览器 4 from selenium import webdriver 5 # 配置 6 from selenium. webdriver import ChromeOptions 7 # 选择器 8 from selenium. webdrive
阅读全文
posted @
2022-10-30 23:16
不是霉蛋
阅读(27)
推荐(0) 编辑
<2> 定义pip安装源
摘要："""定义pip安装源"""# 1.键盘操作win + r健:打开运行窗口# 2.在运行窗口中输入: %APPDATA%# 3.在文件夹路径中新建文件夹:取名为pip# 4.进入该文件夹# 5.新建pip.ini配置文件，并写入以下内容 [global] timeout = 6000 index-u
阅读全文
posted @
2022-10-30 22:33
不是霉蛋
阅读(47)
推荐(0) 编辑
<1> 常用镜像
摘要："""镜像源""" - 豆瓣：https://pypi.douban.com/simple/ - 华中科技大学：https://pypi.hustunique.com/ - 网易：https://mirrors.163.com/pypi/simple/ - 百度源：https://mirror.ba
阅读全文
posted @
2022-10-30 22:26
不是霉蛋
阅读(23)
推荐(0) 编辑
