摘要: https://blog.csdn.net/weixin_42105064/article/details/80151587 阅读全文
posted @ 2020-10-12 10:50 nanfengnan 阅读(83) 评论(0) 推荐(0) 编辑
摘要: python爬虫入门(四)利用多线程爬虫 多线程爬虫 先回顾前面学过的一些知识 1.一个cpu一次只能执行一个任务,多个cpu同时可以执行多个任务2.一个cpu一次只能执行一个进程,其它进程处于非运行状态3.进程里包含的执行单元叫线程,一个进程可以包含多个线程4.一个进程的内存空间是共享的,每个进程 阅读全文
posted @ 2020-10-12 09:12 nanfengnan 阅读(518) 评论(0) 推荐(0) 编辑
摘要: python爬虫入门(三)XPATH和BeautifulSoup4 XML和XPATH 用正则处理HTML文档很麻烦,我们可以先将 HTML文件 转换成 XML文档,然后用 XPath 查找 HTML 节点或元素。 XML 指可扩展标记语言(EXtensible Markup Language) X 阅读全文
posted @ 2020-10-12 08:53 nanfengnan 阅读(263) 评论(0) 推荐(0) 编辑
摘要: python爬虫入门(二)Opener和Requests Handler和Opener Handler处理器和自定义Opener opener是urllib2.OpenerDirector的实例,我们之前一直在使用urlopen,它是一个特殊的opener(也就是我们构建好的)。 但是urlopen 阅读全文
posted @ 2020-10-12 08:52 nanfengnan 阅读(216) 评论(0) 推荐(0) 编辑