随笔分类 - 爬虫
摘要:爬虫是什么 1、什么是互联网? 互联网是由网络设备(网线,路由器,交换机,防火墙等等)和一台台计算机连接而成,像一张网一样。 2、互联网建立的目的? 互联网的核心价值在于数据的共享/传递:数据是存放于一台台计算机上的,而将计算机互联到一起的目的就是为了能够方便彼此之间的数据共享/传递,否则你只能拿U
阅读全文
摘要:第一篇:爬虫基本原理 第二篇:环境安装与搭建 第三篇:网页抓取:urllib,requests,aiohttp,selenium,Splash 第四篇:网页解析:re,lxml,BeautifulSoup,pyquery 第五篇:数据存储:JSON,XML,CSV,Mysql,Mongodb,Red
阅读全文
摘要:Python Beautiful Soup 简介 Beautiful Soup 是一个可以从HTML或XML文件中提取数据的Python库.它能够通过你喜欢的转换器实现惯用的文档导航,查找,修改文档的方式.Beautiful Soup会帮你节省数小时甚至数天的工作时间.你可能在寻找 Beautifu
阅读全文