上一页 1 ··· 4 5 6 7 8 9 10 11 12 ··· 25 下一页
摘要: 1.re模块(正则表达式操作) re模块是文件处理中必不可少的模块,它主要用于字符串的查找,定位等等,在使用网络爬虫时,即使没有爬虫框架,re模块配合urllib2模块也可以完成简单的爬虫功能 2.正则表达式: (1)字符: ** .:匹配任意除换行符\n之外的字符,abc匹配abc **\:转义字 阅读全文
posted @ 2017-07-28 09:32 小春熙子 阅读(602) 评论(0) 推荐(0) 编辑
摘要: 1.创建项目:前提是在环境变量中添加了: 可以运行命令scrapy: (1).scrapy startproject todayMovie (2).scrapy genspider wuHanMovieSpider jycinema.com(搜索域) 创建scrapy项目后的文件目录结构是: 2.S 阅读全文
posted @ 2017-07-28 09:28 小春熙子 阅读(829) 评论(0) 推荐(0) 编辑
摘要: 1.windows下安装scrapy:cmd命令行下:cd到python的scripts目录,然后运行pip install 命令 然后pycharmIDE下就有了Scrapy: 在cmd下运行scrapy命令,出错!!!: 解决方法: 在Python的Lib\site-packages文件夹下新建 阅读全文
posted @ 2017-07-26 19:01 小春熙子 阅读(231) 评论(0) 推荐(0) 编辑
摘要: 1.Logging模块,顾名思义就是针对日志的,到目前为止,所有的程序标准输出(输出到屏幕)都是使用print函数,Logging模块可以代替print函数的功能,并将标准输出输入到日志文件中保存起来,而且利用logging模块可以部分替代debug的功能,给程序排错 2.logging模块有6个级 阅读全文
posted @ 2017-07-25 09:48 小春熙子 阅读(911) 评论(0) 推荐(0) 编辑
摘要: 1.urllib2修改header: (1)在使用网络爬虫时,有一些站点不喜欢被程序访问(非人为访问),会检查连接者的“身份证”;默认情况下,urllib2把自己的版本号Python-urllib2/x.y作为自己的“身份证号码”来通过检查,这个身份证号码可能会让站点有点迷惑,或者干脆不工作 (2) 阅读全文
posted @ 2017-07-24 20:08 小春熙子 阅读(1694) 评论(0) 推荐(0) 编辑
摘要: 1.涉及网络这块,必不可少的模块就是urllib2了。顾名思义这个模块主要负责打开URL和HTTP协议之类的,还有一个模块叫urllib,但它们不是升级版的关系 2.urllib2请求返回网页 (1)urllib2最贱的应用就是urllib2.urlopen函数了: urllib2.urlopen( 阅读全文
posted @ 2017-07-24 19:11 小春熙子 阅读(1002) 评论(0) 推荐(0) 编辑
摘要: 1.九九乘法表: 2.斐波那契数列:又称黄金分割数列(兔子数列):0,1,1,2,3,5,8,13,21,34..... 递归的方式定义:F(0)=0,F(1)=1,F(n)=F(n-1)+F(n-2) 最正统的方法就是函数递归了,不过,Python而言,独有的数据类型--列表,可以使用append 阅读全文
posted @ 2017-07-22 22:17 小春熙子 阅读(643) 评论(0) 推荐(0) 编辑
摘要: 1.Python在格式方面与其他大众语言相差不大,但也有它独特之处尤其是代码缩进;在其他编程语言中,代码缩进大多是为了美观,程序,函数的开始结束都由花括号来控制 而python中却不一样,程序,代码块的开始结束都是由缩进来控制的。 2.Python的缩颈一般都是4个空格,先严格按照这种缩进方法来测试 阅读全文
posted @ 2017-07-21 16:50 小春熙子 阅读(953) 评论(0) 推荐(0) 编辑
摘要: 1.所有的程序都是由函数和类组成的,可以说任何程序里面包含的不是函数就是类 2.函数:In Python Everything is A Function,在Python中,所有的一切都是函数,典型的C语言写法,把所需的功能呢都写成一个一个函数,然后由函数调用函数 3.现在编写一个简单的程序make 阅读全文
posted @ 2017-07-21 10:51 小春熙子 阅读(393) 评论(0) 推荐(0) 编辑
摘要: 1.if else 语句:非此即彼 if 判断条件1: 执行语句1 elif 判断条件2: 执行语句2 elif 判断条件3: 执行语句3 else: 执行语句4 编写一个testIfRamainder7.py 熟悉一下if语句: 2.有限循环 for: for Var in Sequence: 执 阅读全文
posted @ 2017-07-19 21:58 小春熙子 阅读(390) 评论(0) 推荐(0) 编辑
上一页 1 ··· 4 5 6 7 8 9 10 11 12 ··· 25 下一页