摘要: 1.window下‘scrapyd_deploy’不是内部或外部命令,也不是可运行的程序 在windows上使用scrapyd-client 安装后,并不能使用相应的命令'scrapyd-deploy' 需要在"C:\Python27\Scripts" 目录下 增加scrapyd-deploy.ba 阅读全文
posted @ 2018-08-28 21:52 只要平凡 阅读(1384) 评论(0) 推荐(0) 编辑
摘要: 1.列表推导式 2.字典推导式 3.集合推导式 4.生成器推导式 阅读全文
posted @ 2018-08-28 16:40 只要平凡 阅读(187) 评论(0) 推荐(0) 编辑
摘要: 一:去哪儿网(手机版)字体反爬 思路: 对于一些敏感的数据,网站采取了对应的字体来隐藏实际数据的反爬措施,那么我们找到生成字体的js文件,下载字体文件,根据文件字体进行反推,得到最终数据 二:去哪网(网页版)字体反爬 思路:网页版字体反爬是通过css偏移来设置反爬,我们可以通过检查css发现规律。推 阅读全文
posted @ 2018-08-28 16:23 只要平凡 阅读(1260) 评论(0) 推荐(0) 编辑
摘要: 1.基本概念 字符(Character)是各种文字和符号的总称,包括各国家文字、标点符号、图形符号、数字等 字符集(Character set)是多个字符的集合 字符集包括:ASCII字符集、GB2312字符集、GB18030字符集、Unicode字符集等 ASCII编码是1个字节,而Unicode 阅读全文
posted @ 2018-08-25 17:53 只要平凡 阅读(196) 评论(0) 推荐(0) 编辑