06 2017 档案
摘要：上篇介绍的世纪佳缘登录是由已有cookie保持登录状态的。世纪佳缘登陆不需要填入验证码，可以很方便直接请求登录接口来达到登录状态的目的。 这篇介绍直接从登录接口进行登录，那么这就要求要找到登录接口url和接口参数。 登录接口是个https，fiddler中设置https。 双击这个抓包，会跳转到in
阅读全文
摘要：利用这种方法，可以把所有会员信息存储下来，多线程发信息，10秒钟就可以对几百个会员完成发信了。 首先是筛选信息后爬取账号信息， 执行这个后，就可以看到数据库里面会有很多会员信息了。 附上建表语句 CREATE TABLE `shijijiayuan` ( `id` int(10) NOT NULL
阅读全文
摘要：存储使用mysql，增量更新东方头条全站新闻的标题 新闻简介 发布时间 新闻的每一页的内容 以及新闻内的所有图片。东方头条网没有反爬虫，新闻除了首页，其余板块的都是请求一个js。抓包就可以看到。 项目文件结构。 这是settings.py 1 # -*- coding: utf-8 -*- 2 3
阅读全文
