摘要: rpm -ivh http://dl.fedoraproject.org/pub/epel/6/i386/epel-release-6-8.noarch.rpm 安装了epel源 但 yum -y install erlang 的时候报错 错误信息如下: 这就表明你需要更新CA证书了,那么只需要更新 阅读全文
posted @ 2018-03-05 10:30 Moses^ 阅读(307) 评论(0) 推荐(0) 编辑
摘要: 1 .基本流程 url.py views.py 上述是rest framework框架基本流程,重要的功能是在APIView的dispatch中触发。 2. 认证和授权 a. 用户url传入的token认证 from django.conf.urls import url, include from 阅读全文
posted @ 2018-02-07 19:20 Moses^ 阅读(254) 评论(0) 推荐(0) 编辑
摘要: 在看源码之前先了解一下什么是rest,restful api. 什么是rest 可以总结为一句话:REST是所有Web应用都应该遵守的架构设计指导原则。 REST是Representational State Transfer的简称,中文翻译为“表征状态转移”. restful api 符合REST 阅读全文
posted @ 2018-02-05 17:42 Moses^ 阅读(291) 评论(0) 推荐(0) 编辑
摘要: var的变量提升 const命令的用法 const声明的是一个只读的常量,一旦声明,就不可改变. const声明的常量只在块级有效 const声明的常量不存在变量的提升 const不可重复声明常量 const实际上保证的,并不是变量的值不得改动,而是变量指向的那个内存地址不得改动。对于简单类型的数据 阅读全文
posted @ 2018-01-26 21:41 Moses^ 阅读(176) 评论(0) 推荐(0) 编辑
摘要: 一 介绍 Scrapy一个开源和协作的框架,其最初是为了页面抓取 (更确切来说, 网络抓取 )所设计的,使用它可以以快速、简单、可扩展的方式从网站中提取所需的数据。但目前Scrapy的用途十分广泛,可用于如数据挖掘、监测和自动化测试等领域,也可以应用在获取API所返回的数据(例如 Amazon As 阅读全文
posted @ 2018-01-24 18:53 Moses^ 阅读(737) 评论(0) 推荐(1) 编辑
摘要: 一 背景知识 爬虫的本质就是一个socket客户端与服务端的通信过程,如果我们有多个url待爬取,只用一个线程且采用串行的方式执行,那只能等待爬取一个结束后才能继续下一个,效率会非常低。 需要强调的是:对于单线程下串行N个任务,并不完全等同于低效,如果这N个任务都是纯计算的任务,那么该线程对cpu的 阅读全文
posted @ 2018-01-23 18:52 Moses^ 阅读(213) 评论(0) 推荐(2) 编辑
摘要: 增 #1、没有指定_id则默认ObjectId,_id不能重复,且在插入后不可变 #2、插入单条 user0={ "name":"egon", "age":10, 'hobbies':['music','read','dancing'], 'addr':{ 'country':'China', 'c 阅读全文
posted @ 2018-01-22 19:01 Moses^ 阅读(374) 评论(1) 推荐(2) 编辑
摘要: mongodb的安装 1,下载安装包: http://www.runoob.com/mongodb/mongodb-window-install.html 2,安装至: D:\MongoDB,将D:\MongoDB\bin目录加入环境变量 3,在 D:\MongoDB下新建文件夹 : 4,直接在命令 阅读全文
posted @ 2018-01-19 15:41 Moses^ 阅读(274) 评论(0) 推荐(1) 编辑
摘要: 一 介绍 官网:http://selenium-python.readthedocs.io 二 安装 #安装:selenium+chromedriver pip3 install selenium 下载chromdriver.exe放到python安装路径的scripts目录中即可,注意最新版本是2 阅读全文
posted @ 2018-01-18 19:23 Moses^ 阅读(257) 评论(0) 推荐(1) 编辑
摘要: 介绍 GET请求 POST请求 发送post请求,模拟浏览器的登录行为 ''' 一 目标站点分析 浏览器输入https://github.com/login 然后输入错误的账号密码,抓包 发现登录行为是post提交到:https://github.com/session 而且请求头包含cookie 阅读全文
posted @ 2018-01-17 17:10 Moses^ 阅读(882) 评论(0) 推荐(1) 编辑