摘要：<!--done--> Selenium 简介 selenium最初是一个自动化测试工具,而爬虫中使用它主要是为了解决requests无法直接执行JavaScript代码的问题 selenium本质是通过驱动浏览器，完全模拟浏览器的操作，比如跳转、输入、点击、下拉等，来拿到网页渲染之后的结果，可支持 阅读全文

摘要：<!--done--> 爬虫简介 概述 近年来，随着网络应用的逐渐扩展和深入，如何高效的获取网上数据成为了无数公司和个人的追求，在大数据时代，谁掌握了更多的数据，谁就可以获得更高的利益，而网络爬虫是其中最为常用的一种从网上爬取数据的手段。 网络爬虫，即Web Spider，是一个很形象的名字。如果把 阅读全文

摘要：缓存 简单概括就是将对数据库操作查询所得到的数据放入另外一台机器上(缓存)中，当用户再次请求时，直接去缓存中拿，避免对数据库的频繁操作，加快数据的显示时间，需要知道的是，缓存里面的数据一般都设置有超时时间，缓存一般用在数据变化不大，实时率不高的情况下。 由于Django是动态网站，所有每次请求均会去 阅读全文