摘要： 网络爬虫-07） **Spider06回顾****scrapy框架****完成scrapy项目完整流程****我们必须记住****爬虫项目启动方式****数据持久化存储** **Spider07笔记****分布式爬虫****scrapy_redis详解****腾讯招聘分布式改写****机器视觉与te 阅读全文

摘要： 网络爬虫-05） **Spider04回顾****Spider05笔记****selenium+PhantomJS/Chrome/Firefox****chromedriver设置无界面模式****==selenium - 鼠标操作==****==selenium - 切换页面==****==sel 阅读全文

摘要： 网络爬虫-02 **Spider-01回顾****请求模块(requests)****编码模块(urllib.parse)****解析模块(re)****抓取步骤** **spider-02笔记****数据持久化 - MySQL****数据持久化 - MongoDB****数据持久化 - csv** 阅读全文

摘要： 环境 xubuntu 16.04anacondapycharmpython3.6https://www.cnblogs.com/jokerbj/p/7460260.htmlhttp://www.dabeaz.com/python/UnderstandingGIL.pdf 多线程 vs 多进程 程序： 阅读全文

摘要： 文件 长久保存信息的一种数据信息集合常用操作 打开关闭（文件一旦打开，需要关闭操作）读写内容查找 open函数 open函数负责打开文件，带有很多参数第一个参数： 必须有，文件的路径和名称mode：表明文件用什么方式打开 r:以只读方式打开w：写方式打开，会覆盖以前的内容x：创建方式打开，如文件已经 阅读全文

摘要： 补充几个高级函数 zip 把两个可迭代内容生成一个可迭代的tuple元素类型组成的内容 # zip 案例 l1 = [ 1,2,3,4,5] l2 = [11,22,33,44,55] z = zip(l1, l2) print(type(z)) print(z) for i in z: print 阅读全文

摘要： Log模块资料 https://www.cnblogs.com/yyds/p/6901864.html Python语言的高级特性 函数式编程(FunctionalProgramming) 基于lambda演算的一种编程方式 程序中只有函数函数可以作为参数，同样可以作为返回值纯函数式编程语言： LI 阅读全文

摘要： 常用模块 calendartimedatetimetimeitosshutilzipmathstring上述所有模块使用理论上都应该先导入，string是特例calendar, time, datetime的区别参考中文的意思 calendar 跟日历相关的模块 # 使用需要先导入 import c 阅读全文

摘要： 0. OOP-Python面向对象 Python的面向对象面向对象编程 基础公有私有继承组合，Mixin 魔法函数 魔法函数概述构造类魔法函数运算类魔法函数 1. 面向对象概述（ObjectOriented，OO） OOP思想 接触到任意一个任务，首先想到的是任务这个世界的构成，是由模型构成的 几个 阅读全文

摘要： 1.项目内容： 在屏幕左上角添加一个外星人，并指定合适的边框，根据第一个外星人的边距和屏幕尺寸计算屏幕上可容纳多少个外星人。让外星人群向两边和下方移动，直到外星人被全部击落，有外星人撞到飞船，或有外星人抵达屏幕底端。如果整群外星人都被击落，我们将再创建一群外星人，如果有外星人撞到了飞船或抵达屏幕底端 阅读全文