配置了两天python【python可以的】
摘要：首先是看cs231n 发现代码的版本是py2 而我只装了 py3(anaconda3) 怎么办呢 于是想办法装了 anaconda2 并与之共存 ，调用的时候用 activate py2调用 http://blog.csdn.net/infin1te/article/details/50445217
阅读全文
PYTHON网络爬虫与信息提取[scrapy框架应用](单元十、十一)
摘要：scrapy 常用命令 startproject 创建一个新的工程 scrapy startproject <name>[dir] genspider 创建一个爬虫 scrapy genspider [options]<name><domain> settings 获得爬虫的配置信息scrapy s
阅读全文
PYTHON网络爬虫与信息提取[正则表达式的使用](单元七)
摘要：正则表达式由字符和操作符构成 . 表示任何单个字符 []字符集，对单个字符给出取值范围 [abc]或者关系 [a-z]表示 [^abc]表示非这里面的东西 非字符集 * 表示星号之前的字符出现0次或者无限次扩展 + 表示星号之前的字符出现一次或者无限次扩展 ? 表示出现0次或1扩展 | 表示左右表达
阅读全文
扩展欧几里得算法
摘要：注意以下结论： ax+by=c的一组整数解为x y,则他的任意整数解可以写成(x+kb'，y-ka') b'=b/gcd(a,b) a'=gcd(a,b) ax+by=c 若c 不是gcd(a,b)的整数倍则无整数解 递归的最后得到如下式子 gcd(a,b)*1+0*y=gcd(a,b)
阅读全文
PYTHON网络爬虫与信息提取[信息的组织与提取](单元五)
摘要：1 三种信息类型的简介 xml : extensible markup language 与html非常相似 现有html后有xml xml是html发展来的 扩展 通用 json 类型 javascript object notation 有类型的键值对 表达的方式 一个key对应多个值 "key
阅读全文
PYTHON网络爬虫与信息提取[BeautifulSoup](单元四)
摘要：1 简介 from bs4 import BeautifulSoup soup=BeautifulSoup(<p>data</p>,'html.parser') 2 基本元素 解析，遍历，维护，标签树的库 <p class="title"> ...</p> tag对 名称 (属性 attribute
阅读全文
PYTHON网络爬虫与信息提取[网络爬虫协议](单元二)
摘要：robots.txt在网站的根目录下 遵守 自动或人工识别robots.txt再进行内容爬取 约束性：建议性，不遵守协议，存在法律风险。 基本语法： User-agent: * Disallow: / #注释 *所有 /代表根目录
阅读全文
Python网络爬虫与信息提取[request库的应用](单元一)
摘要：恢复内容开始 注：学习中国大学mooc 嵩天课程 的学习笔记 request的七个主要方法 request.request() 构造一个请求用以支撑其他基本方法 request.get(url,params=None,**kwarg) 12个参数 获取html的主要方法，对应于http的GET re
阅读全文
