大数据收集方法，想快速采集海量数据，可以使用数据采集器（例如简数采集器）来实现。
快速收集大量高质量的文章数据，可以寻找网站的列表页网址翻页规律、或者是文章网址变化的规律，然后利用数据采集器批量生成网址功能，让软件批量去采集对应网址里的数据，我们只需点下鼠标即可，无需重复复制粘贴等低效率方法。
大数据收集方法如下：
1. 网址翻页规律
网站的每个栏目列表页有很多页，每一页都有好多条数据的网址，批量采集多个列表页里的文章网址，就可以。
列表页网址一般是有规律的按数字变化，最常见的就是按1递增。例如：
列表页第1页：http://www.域名.com/zixun_1.html
列表页第2页：http://www.域名.com/zixun_2.html
列表页第3页：http://www.域名.com/zixun_3.html
可以观察到，列表页翻页变化的只是zixun_后面的数字，是按照1递增。
2. 批量生成网址
根据上面得到的列表页网址翻页规律，在简数采集器批量生成对应的网址：
1）在简数采集器的某个任务基本信息页面，点击 “批量生成网址（翻页）”按钮；
2）翻页网址模式处，把列表页网址变化的数字换成参数#sd_pageNo#，例如：
http://www.域名.com/zixun_#sd_pageNo#.html
3）接着修改翻页范围，例如网站有1000页列表页，就设置从第1页到1000页，完成后保存。
4）回到任务的基本信息页面，最下方的保存按钮也必须点击保存。
3. 采集大数据
翻页规则设置完成后，就可以点击右上角的启动采集按钮，等待海量大数据采集完成。
简数采集器是云采集云发送，启动后可以关闭页面或者电脑的，无需一直开着电脑的。
采集结果示例：
