2022年4月7日
Python 将时间戳转换为日期
摘要： 时间戳转为日期 time模块，使用localtime转换，再使用strftime格式化 import time timestamp = 1609834156 date = time.localtime(timestamp) format_date = time.strftime('%Y-%m-%d 阅读全文
posted @ 2022-04-07 11:16 王舰 阅读(1709) 评论(0) 推荐(0) 编辑
Redis 有序集合ZSET 基础函数
摘要： 复习总结一下redis, 为之后的大规模分布式爬虫做准备 @ 前戏 进入命令行模式 redis-cli 查询所有key 127.0.0.1:6379> KEYS * 1) "proxies:universal" 查询key 存储在 redis服务器中的类型，确认是有序集合ZSET类型 127.0.0 阅读全文
posted @ 2022-04-07 11:16 王舰 阅读(191) 评论(0) 推荐(0) 编辑
Python 创建字典与fromkeys的坑
摘要： 字典很重要 字典dict 是Python中很重要的一个数据类型, 通过键值映射, 能够很好的定位查找. Django, Flask这些Web框架在做前后端分离时, 就是用字典传数据的, 因为它和列表list 配合起来, 能够很好的与json格式的数据相互转化. 用Flask + Echarts做数据 阅读全文
posted @ 2022-04-07 11:14 王舰 阅读(50) 评论(0) 推荐(0) 编辑
2022年4月6日
Python Flask框架 数据库连接池
摘要： Python Flask 框架 .............. 数据库链接池 pip3 install pymysql dbutils 简单实现 ''' @Date : 2020-11-12 20:02:49 @LastEditors : Pineapple @LastEditTime : 2020- 阅读全文
posted @ 2022-04-06 15:08 王舰 阅读(981) 评论(0) 推荐(0) 编辑
Python @functools.wraps
摘要： 随便写一个装饰器： def pine(func): def inner(*args, **kwargs): """This is inner""" return func(*args, **kwargs) return inner @pine def apple(): """This is appl 阅读全文
posted @ 2022-04-06 15:07 王舰 阅读(180) 评论(0) 推荐(0) 编辑
Python numpy.random.randint
摘要： Numpy中,给定范围内取随机数: numpy.random.randint(low, high=None, size=None, dtype=int) 从低（包含）到高（不含）返回随机整数。 如果只传参数low, 那么得到的随机数将小于low(不包括low), 随机值的区间为[0, low) >> 阅读全文
posted @ 2022-04-06 15:07 王舰 阅读(124) 评论(0) 推荐(0) 编辑
Python Python3.9使用uvloop抛出NotImplementedError异常
摘要： ## 一、问题描述 代码 ```python ''' @Date : 2020-10-20 14:17:15 @LastEditors : Pineapple @LastEditTime : 2020-10-30 17:42:21 @FilePath : /Bus_station/#test.py 阅读全文
posted @ 2022-04-06 15:06 王舰 阅读(201) 评论(0) 推荐(0) 编辑
User-Agent和Cookie反爬虫以及如何绕过
摘要： ## 一、前言 今天是1024程序员节，大家节日快乐。听说今天发博客会得一枚1024勋章，一年一次呢，真是稀有。写篇博客顺便把这几天学习的相关知识总结一下。 ## 二、为什么要学习反爬虫 从暑假算起到现在，我也接触了4个月的爬虫，期间做过不少测试和实战，越往后学，越是难学。倒不是难在设计爬虫，编写P 阅读全文
posted @ 2022-04-06 15:05 王舰 阅读(1358) 评论(0) 推荐(0) 编辑
Python random.getrandbits(k)
摘要： random.getrandbits(k) 返回带有 k 位随机的Python整数。 此方法随 MersenneTwister 生成器一起提供，其他一些生成器也可以将其作为API的可选部分提供。 如果可用，getrandbits() 启用 randrange() 来处理任意大范围。 在 3.9 版更 阅读全文
posted @ 2022-04-06 15:05 王舰 阅读(331) 评论(0) 推荐(0) 编辑
Linux deepin/ubuntu系统抓包工具Charles设置
摘要： ## 一、前言 最近一直在折腾双系统的事情，我看了一下，大约有10天没写博客哈哈，也没咋学习。以后打算把deepin作为开发工具，折腾了几天系统，基本的环境jdk，python，vmware啥的都搭建好了，接下来终于可以回归爬虫的学习，不过在这前的头等大事还是抓包工具配置Charles。 ## 二、 阅读全文
posted @ 2022-04-06 15:04 王舰 阅读(602) 评论(0) 推荐(0) 编辑