摘要: 一. 什么是RESTful REST与技术无关,代表的是一种软件架构风格,REST是Representational State Transfer的简称,中文翻译为“表征状态转移” REST从资源的角度类审视整个网络,它将分布在网络中某个节点的资源通过URL进行标识,客户端应用通过URL来获取资源的 阅读全文
posted @ 2018-05-15 10:28 驴途人生 阅读(188) 评论(0) 推荐(0) 编辑
摘要: Scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架。 其可以应用在数据挖掘,信息处理或存储历史数据等一系列的程序中。其最初是为了页面抓取 (更确切来说, 网络抓取 )所设计的, 也可以应用在获取API所返回的数据(例如 Amazon Associates Web Services ) 阅读全文
posted @ 2017-11-08 14:57 驴途人生 阅读(686) 评论(0) 推荐(0) 编辑
摘要: 在编写爬虫时,性能的消耗主要在IO请求中,当单进程单线程模式下请求URL时必然会引起等待,从而使得请求整体变慢。 1 import requests 2 3 def fetch_async(url): 4 response = requests.get(url) 5 return response 阅读全文
posted @ 2017-11-08 14:39 驴途人生 阅读(671) 评论(0) 推荐(0) 编辑
摘要: BeautifulSoup是一个模块,该模块用于接收一个HTML或XML字符串,然后将其进行格式化,之后遍可以使用他提供的方法进行快速查找指定元素,从而使得在HTML或XML中查找指定元素变得简单。 from bs4 import BeautifulSoup html_doc = """ <html 阅读全文
posted @ 2017-11-04 19:46 驴途人生 阅读(126) 评论(0) 推荐(0) 编辑
摘要: 1、GET请求 # 1、无参数实例 import requests ret = requests.get('https://github.com/timeline.json') print ret.url print ret.text # 2、有参数实例 import requests payloa 阅读全文
posted @ 2017-11-04 19:29 驴途人生 阅读(499) 评论(0) 推荐(0) 编辑
摘要: 下载 官网下载:http://kindeditor.net/down.php 本地下载:http://files.cnblogs.com/files/wupeiqi/kindeditor_a5.zip 3、文件夹说明 1 2 3 4 5 6 7 8 9 10 11 12 13 14 ├── asp 阅读全文
posted @ 2017-11-03 22:25 驴途人生 阅读(220) 评论(0) 推荐(0) 编辑
摘要: ModelForm a. class Meta: model, # 对应Model的 fields=None, # 字段 exclude=None, # 排除字段 labels=None, # 提示信息 help_texts=None, # 帮助提示信息 widgets=None, # 自定义插件 阅读全文
posted @ 2017-10-21 10:45 驴途人生 阅读(150) 评论(0) 推荐(0) 编辑
摘要: 一、字段 AutoField(Field) - int自增列,必须填入参数 primary_key=True BigAutoField(AutoField) - bigint自增列,必须填入参数 primary_key=True 注:当model中如果没有自增列,则自动会创建一个列名为id的列 fr 阅读全文
posted @ 2017-10-19 20:42 驴途人生 阅读(481) 评论(0) 推荐(0) 编辑
摘要: 生成HTML标签 验证用户数据(显示错误信息) HTML Form提交保留上次提交数据 初始化页面显示内容 小试牛刀 1、创建Form类 2、View函数处理 3、生成HTML <form method="POST" enctype="multipart/form-data"> {% csrf_to 阅读全文
posted @ 2017-10-15 10:17 驴途人生 阅读(170) 评论(0) 推荐(0) 编辑
摘要: 默认情况下,logging将日志打印到屏幕,日志级别为WARNING;日志级别大小关系为:CRITICAL > ERROR > WARNING > INFO > DEBUG > NOTSET,当然也可以自己定义日志级别。 将日志打印到屏幕 1 import logging 2 3 logging.d 阅读全文
posted @ 2017-09-11 13:59 驴途人生 阅读(148) 评论(0) 推荐(0) 编辑