随笔分类 -  Python

scrapy爬虫出现Forbidden by robots.txt
摘要：scrapy爬虫出现Forbidden by robots.txt scrapy爬虫出现Forbidden by robots.txt 阅读全文
posted @ 2017-12-14 22:20 GordonDicaprio 阅读(246) 评论(0) 推荐(0) 编辑
pycharm运行scrapy
摘要：pycharm运行scrapy 阅读全文
posted @ 2017-12-13 22:34 GordonDicaprio 阅读(140) 评论(0) 推荐(0) 编辑
【安装Python环境】之安装Selenium2时报UnicodeDecodeError: 'utf-8' codec can't decode byte 0xc8 in position 12: invalid continuation byte问题
摘要：【安装Python环境】之安装Selenium2时报UnicodeDecodeError: 'utf-8' codec can't decode byte 0xc8 in position 12: invalid continuation byte问题 阅读全文
posted @ 2017-12-13 22:17 GordonDicaprio 阅读(895) 评论(0) 推荐(0) 编辑
Scrapy爬虫入门教程十三 Settings（设置） settings from_crawler
摘要：Scrapy爬虫入门教程十三 Settings（设置） 阅读全文
posted @ 2017-12-10 17:47 GordonDicaprio 阅读(599) 评论(0) 推荐(0) 编辑
篇三：XPath--解析Html
摘要：篇三：XPath--解析Html 阅读全文
posted @ 2017-12-10 16:31 GordonDicaprio 阅读(106) 评论(0) 推荐(0) 编辑
黄哥漫谈Python 生成器。
摘要：黄哥漫谈Python 生成器。 阅读全文
posted @ 2017-12-10 10:40 GordonDicaprio 阅读(201) 评论(0) 推荐(0) 编辑
scrapy 报错 no module named win32api 的解决方案
摘要：解决方案： 原因是缺少win32,到 http://sourceforge.net/projects/pywin32/files/ 找到对应的版本进行下载，直接安装即可 Python是没有自带访问windows系统API的库的，需要下载。库的名称叫pywin32，可以从网上直接下载。 以下链接地址可 阅读全文
posted @ 2017-12-09 22:48 GordonDicaprio 阅读(945) 评论(0) 推荐(0) 编辑
Scrapy安装错误：Microsoft Visual C++ 14.0 is required
摘要：问题描述 当前环境win10，python_3.6.1，64位。 在windows下，在dos中运行pip install Scrapy报错： 解决方案 http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted 下载twisted对应版本的whl文件（如我 阅读全文
posted @ 2017-12-09 22:41 GordonDicaprio 阅读(438) 评论(0) 推荐(0) 编辑
机器人排除标准 robot.txt robot exclusion standard
摘要：18.2 什么是机器人排除标准 《搜索引擎优化宝典(第2版)》第18章机器人、蜘蛛和爬虫，本章主要的内容有：什么是机器人、爬虫和蜘蛛；什么是机器人排除标准; Robots 元标签；用XML 网站地图使网页被收录。本节为大家介绍什么是机器人排除标准虫。 作者：马煜 译来源：清华大学出版社|2010-0 阅读全文
posted @ 2017-12-09 22:21 GordonDicaprio 阅读(879) 评论(0) 推荐(0) 编辑
yield - python
摘要：Python yield 使用浅析 彻底理解Python中的yield 阅读全文
posted @ 2017-12-09 21:42 GordonDicaprio 阅读(130) 评论(0) 推荐(0) 编辑
Scrapy documentation
摘要：https://docs.scrapy.org/en/latest/ 阅读全文
posted @ 2017-12-08 12:23 GordonDicaprio 阅读(104) 评论(0) 推荐(0) 编辑
Python - 连接msql数据库
摘要：可能出现的异常：python中出现SyntaxError: Non-UTF-8 code 解决方法 刚开始一直有用idle写代码，今天用了一下PyDev结果发现中文不支持，在网上搜了一下，结果发现解决方法都写得比较乱，自己写一个记录一下。 1.把相应Python程序文件的编码转成UTF-8格式就可以 阅读全文
posted @ 2017-12-08 11:32 GordonDicaprio 阅读(383) 评论(0) 推荐(0) 编辑
更换pip源到国内镜像
摘要：更换pip源到国内镜像 阅读全文
posted @ 2017-12-08 09:48 GordonDicaprio 阅读(94) 评论(0) 推荐(0) 编辑
Urllib3 库详解
摘要：文档：http://urllib3.readthedocs.io/en/latest/ 阅读全文
posted @ 2017-12-08 09:48 GordonDicaprio 阅读(164) 评论(0) 推荐(0) 编辑
python+Eclipse+pydev环境搭建
摘要：python+Eclipse+pydev环境搭建 阅读全文
posted @ 2017-12-08 00:37 GordonDicaprio 阅读(93) 评论(0) 推荐(0) 编辑
python下实现汉诺塔
摘要：python下实现汉诺塔 阅读全文
posted @ 2017-12-06 16:22 GordonDicaprio 阅读(146) 评论(0) 推荐(0) 编辑
Python - 装饰器
摘要：output: 阅读全文
posted @ 2017-12-03 20:44 GordonDicaprio 阅读(277) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示