2017年5月17日
同步和异步 阻塞和非阻塞 IO多路复用和select总结
摘要： 同步和异步的概念 同步是指用户线程发起IO请求后,需要等待或者轮询内核IO操作完成后才能继续执行； 异步是指用户线程发起IO请求后仍继续执行，当内核IO操作完成后会通知用户线程或者调用用户线程注册的回调函数。 阻塞和非阻塞的概念 阻塞是指IO操作需要彻底完成后才返回到用户空间； 非阻塞是指IO操作被 阅读全文
posted @ 2017-05-17 12:50 努力哥 阅读(1243) 评论(0) 推荐(0) 编辑
python爬虫之scrapy框架
摘要： Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架。 其可以应用在数据挖掘，信息处理或存储历史数据等一系列的程序中。其最初是为了页面抓取 (更确切来说, 网络抓取 )所设计的， 也可以应用在获取API所返回的数据(例如 Amazon Associates Web Services ) 阅读全文
posted @ 2017-05-17 10:12 努力哥 阅读(914) 评论(0) 推荐(0) 编辑
python wheel 包命名规则和 abi 兼容
摘要： wheel 包的命名规定 执行过程： 阅读全文
posted @ 2017-05-17 09:42 努力哥 阅读(2343) 评论(0) 推荐(0) 编辑