摘要:
我在深圳的一家跨境电商公司中从事Aliexpress项目经理时,曾苦于站内流量的匮乏,而培养爆款是需要相对长期的运营同时需要公司多方的协助。在这种情况下便想方设法可以从站内搜索中获得更多的流量,便有了这个站内SEO的辅助工具,最早的版本是一个python脚本,现在我用scrapy实现了就先把它记录下 阅读全文
摘要:
由上一节中爬虫程序已经在scrapy中定义完成,我们准备生成app。 目前生成app的软件颇多,这里我们需要以数据库驱动,选择了appery.io。 1. 生成数据库 注册完成之后,先在database选项卡中添加一行新用户,名为root。随后添加新的数据库名为scrapy和新的collection 阅读全文
摘要:
先记录下我用scrapy做的一个小例子。 使用的软件版本:python 2.7.11, scrapy 1.0.5 1. Scrapy通常所使用操作过程:UR2IM 即URL, Request, Response, Items, More URLs。 可以用下面这张图简单的解释: 从最初的一个URL发 阅读全文