随笔分类 - 爬虫
摘要:网络请求过程 简述“从页面请求到后端响应再到页面呈现的整个过程”。在我看来,不管是前端开发还是后端开发的工程师都应该了解这个过程,了解这个过程可以让你整体把握整个软件的运行流程,同时可以让你更好地理解一些前后端优化、SEO,甚至一些网络安全的问题。要想讲清楚“网络请求的整个过程”的话,其中涉及到的网
阅读全文
摘要:1.爬虫的概念 (1)爬虫又叫网页蜘蛛,是模拟人操作客户端向服务器发起请求,抓取数据的自动化程序或脚本。 (2)说明: ① 模拟:用爬虫程序伪装出人的行为,避免被服务器识别为爬虫程序; ② 客户端:浏览器、app都可以实现人与服务器之间的交互行为,应用客户端从服务器获取数据; ③ 自动化: 数据量较
阅读全文