奇迹969

 

2019年7月30日

爬虫基础

摘要： 1.序列化操作（cpickle 与 pickle 工能一样但是效率高） pickle 是序列化 成字节 注意dump /load 和 dumps/loads 的区别 2.进程和线程 多进程：os.fork multiprocessing 进程间数据传输 queue pipe 多线程 协程（geven 阅读全文

posted @ 2019-07-30 19:39 奇迹969 阅读(84) 评论(0) 推荐(0) 编辑

爬虫

摘要： HTTP协议 常用请求方法： get， post 请求头参数(需要手动填写 都在header 里的 requestheader 里) User-Agent： Referer： Cookie： 常见状态码：2000（正常） 301（永久重定向 ） 302 （临时重定向） 400(URL在服务器上找不到 阅读全文

posted @ 2019-07-30 09:48 奇迹969 阅读(150) 评论(0) 推荐(0) 编辑

导航