07 2018 档案

反射及内置方法
摘要:一.内置函数 1.instance() 判断对象与类的所属关系,包括继承关系 2.insubclass() 判读两个类是否有继承关系 二. 反射 1.通过类名进行的反射 2.通过对象进行的反射 3.模块反射 4.反射自己模块中的内容, 5.setattr(对象名,'旧', "新") delattr( 阅读全文

posted @ 2018-07-30 21:24 古月蜀黍 阅读(122) 评论(0) 推荐(0) 编辑

flask的简单使用
摘要:一.Flask中的CBV from flask import Flask, render_template from flask import views app = Flask(__name__, template_folder='temp') # type:Flask app.config['D 阅读全文

posted @ 2018-07-27 15:49 古月蜀黍 阅读(270) 评论(0) 推荐(0) 编辑

flask基础
摘要:一. Python 现阶段三大主流Web框架 Django Tornado Flask 对比 1.Django 主要特点是大而全,集成了很多组件,例如: Models Admin Form 等等, 不管你用得到用不到,反正它全都有,属于全能型框架 2.Tornado 主要特点是原生异步非阻塞,在IO 阅读全文

posted @ 2018-07-26 17:44 古月蜀黍 阅读(122) 评论(0) 推荐(0) 编辑

数据分析之Matplotlib
摘要:一.Matplotlib的基础知识 Matplotlib中的基本图表包括的元素 •x轴和y轴 axis 水平和垂直的轴线 •x轴和y轴刻度 tick 刻度标示坐标轴的分隔,包括最小刻度和最大刻度 •x轴和y轴刻度标签 tick label 表示特定坐标轴的值 •绘图区域(坐标系) axes 实际绘图 阅读全文

posted @ 2018-07-25 20:17 古月蜀黍 阅读(309) 评论(0) 推荐(0) 编辑

pycharm 快捷键
摘要:pycharm常用快捷键与设置 pycharm高频率使用的快捷键 Ctrl+Shift+F10 运行当前的页面 Ctrl + / 注释(取消注释)选择的行 Ctrl+Shift+F 高级查找 Shift + Enter 开始新行 TAB Shift+TAB 缩进/取消缩进所选择的行 Ctrl + Y 阅读全文

posted @ 2018-07-25 11:10 古月蜀黍 阅读(198) 评论(0) 推荐(0) 编辑

数据分析之pandas02
摘要:DataFrame 一.DataFrame DataFrame是一个[表格型]的数据结构.DataFrame又按一定顺序排列的多列数据组成,设计初衷是将Series的使用场景从一维扩展到多维.DateFrame既有行索引,也有列索引. 行索引:index 列索引:columns 值:values 二 阅读全文

posted @ 2018-07-24 15:28 古月蜀黍 阅读(178) 评论(0) 推荐(0) 编辑

数据分析之pandas01
摘要:Series 一.Series Series是一种类似于一维数组的对象,有两部分组成: .values:一组数据(ndarray类型) .index: 相关的数据索引标签 二.series的创建 1.由列表或numpy数组创建 Series(data=[1,2,3,4],index=['a','b' 阅读全文

posted @ 2018-07-23 15:53 古月蜀黍 阅读(125) 评论(0) 推荐(0) 编辑

隐匿函数,二分法 冒泡排序
摘要:一,lambda匿名函数 1.语法 函数名=lambda 参数:返回值 2.不能用于复杂的函数 二.sorted()排序函数 1.语法 sorted(可迭代对象(iterable),key=函数,reserve=false(默认值)) 三.filter()筛选函数 1.语法 filter(函数,可迭 阅读全文

posted @ 2018-07-20 16:16 古月蜀黍 阅读(190) 评论(0) 推荐(0) 编辑

数据分析之Numpy
摘要:一.Numpy Numpy(numerical python)是python语言的一个扩展程序库,支持大量的维度数组和矩阵运算,此外也针对数组运算提供了大量的数学函数库 二.创建ndarray 1.使用np.array()创建 (1)创建一维数组 np.array([1,2,3,4]) (2)创建二 阅读全文

posted @ 2018-07-18 16:59 古月蜀黍 阅读(143) 评论(0) 推荐(0) 编辑

生成器
摘要:1. 生成器和生成器函数 生成器的本质就是迭代器 生成器的三种创建办法: 1.通过生成器函数 2.通过生成器表达式创建生成器 3.通过数据转换 生成器函数: 函数中包含了yield的就是生成器函数 注意:生成器函数被执行. 获取到的是生成器. 而不是函数的执行 生成器表达式: (结果 for 变量 阅读全文

posted @ 2018-07-18 15:28 古月蜀黍 阅读(98) 评论(0) 推荐(0) 编辑

爬虫之分布式爬虫和增量爬虫
摘要:一.基于scrapy-redis两种形式的分布式爬虫 1.scrapy框架是否可以自己实现分布式? - 不可以。原因有二。 其一:因为多台机器上部署的scrapy会各自拥有各自的调度器,这样就使得多台机器无法分配start_urls列表中的url。(多台机器无法共享同一个调度器) 其二:多台机器爬取 阅读全文

posted @ 2018-07-12 16:08 古月蜀黍 阅读(176) 评论(0) 推荐(0) 编辑

爬虫之牛掰的scrapy框架
摘要:一. Scrapy简介及安装 http://python.jobbole.com/86405/ Scrapy的详细介绍 1.简介 2.安装 1.window上安装: 先安装依赖包:pip3 install wheel https://www.lfd.uci.edu/~gohlke/pythonlib 阅读全文

posted @ 2018-07-11 17:43 古月蜀黍 阅读(151) 评论(0) 推荐(0) 编辑

python的一些遗漏用法
摘要:一. 补充基础数据类型的相关知识点 1. str. join() 把列表变成字符串 2. 列表不能再循环的时候删除. 因为索引会跟着改变 3. 字典也不能直接循环删除,把要删除的内容记录在列表中. 循环列表. 删除原列表, 字典中的数据 A 4. fromkeys() 不会对原来的字典产生影响. 产 阅读全文

posted @ 2018-07-10 14:49 古月蜀黍 阅读(183) 评论(0) 推荐(0) 编辑

一些常见的东西
摘要:1. is 和 == 区别 id()函数 == 判断两边的值 is 判断内存地址 回顾编码: 1. ASCII: 英文, 特殊字符, 数字, 8bit, 1byte 2. GBK: 中文 16bit, 2byte. 兼容ASCII 3. unicode: 万国码, 32bit 4byte. 兼容AS 阅读全文

posted @ 2018-07-09 21:26 古月蜀黍 阅读(97) 评论(0) 推荐(0) 编辑

爬虫学习06用selenium爬取空间
摘要:用selenium爬取空间 from selenium import webdriver from lxml import etree import time pro = webdriver.Chrome(executable_path=r'C:\Users\古月蜀黍\Desktop\chromedriver_win32\chromedriver.exe') pro.get(url='https... 阅读全文

posted @ 2018-07-06 19:39 古月蜀黍 阅读(118) 评论(0) 推荐(0) 编辑

爬虫学习04.
摘要:对加密数据的爬取 import requests from lxml import etree import base64 import os from urllib import request url = 'http://jandan.net/ooxx/page-46' headers = { 阅读全文

posted @ 2018-07-06 13:52 古月蜀黍 阅读(124) 评论(0) 推荐(0) 编辑

爬虫学习03常用模块
摘要:一.requests 1. requests.get(url,headers) 2.requests.post(url, headers, data) 二.urllib from urllib import request 1.request.urlretreieve(url, filename) 阅读全文

posted @ 2018-07-06 13:38 古月蜀黍 阅读(100) 评论(0) 推荐(0) 编辑

爬虫 02
摘要:一.代理ip 1.代理ip的级别 (1)透明 别人知道你使用的是代理ip,也知道你的真实ip (2)匿名代理 别人知道你使用的是代理ip,但不知道你的真实ip (3)高度匿名代理 别人不知道你使用的是代理ip,也不知道你的真实ip 2.代理的分类. (1)正向代理: 代理客户端获取数据,正向代理为了 阅读全文

posted @ 2018-07-04 17:08 古月蜀黍 阅读(86) 评论(0) 推荐(0) 编辑

爬虫初始
摘要:一.爬虫概念 1.什么是爬虫? 爬虫就是通过编写程序模拟浏览器上网,然后让其去互联网上抓取数据的过程。 2.哪些语言可以实现爬虫? (1)php:可以实现爬虫。php被号称是全世界最优美的语言(当然是其自己号称的,就是王婆卖瓜的意思),但是php在实现爬虫中支持多线程和多进程方面做的不好。 (2)j 阅读全文

posted @ 2018-07-03 15:37 古月蜀黍 阅读(132) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示