摘要:
多进程的定义 提高效率(增加并发数) 进程是程序一次动态的执行过程,包括代码加载,执行,执行完毕退出阶段 进程是系统资源分配的独立单位(最小单位) 进程拥有自己独立的堆和栈,既不共享堆,亦不共享栈,进程由操作系统调度 多进程的特性 并发性:任何进程在操作系统中可以同时运行 独立性:资源不共享 异步性 阅读全文
摘要:
最近在学习爬虫,在爬取网站时很多时候是需要将图片或视频下载到本地 今天就来说说如何使用urllib将图片保存到本地 以下代码均为win7 python3.6.* 使用urllib下载函数保存 使用urllib文件方式写入文件 使用urllib的下载函数下载视频并输出下载进度 说明: 参数 finen 阅读全文
摘要:
以下内容均为python3.6.*代码 学习爬虫,首先有学会使用urllib库,这个库可以方便的使我们解析网页的内容,本篇讲一下它的基本用法 解析网页 构造请求 有些网站通过获取浏览器信息判断是否是机器在操作 因此我们需要构造请求头 get请求传输数据 提交表单经常用到的就是post发送或者get发 阅读全文