上一页 1 ··· 4 5 6 7 8 9 10 11 12 下一页
摘要: 一. 什么是RESTful 二. RESTful API设计 API与用户的通信协议,总是使用HTTPs协议。 域名 版本 路径,视网络上任何东西都是资源,均使用名词表示(可复数) method 过滤,通过在url上传参的形式传递搜索条件 状态码 200 OK - [GET]:服务器成功返回用户请求 阅读全文
posted @ 2018-02-05 08:19 Pythia丶陌乐 阅读(150) 评论(0) 推荐(0) 编辑
摘要: 阅读目录 第一篇:Flask基础知识介绍 第二篇:Flask扩展小结 第三篇:Flask 配置文件 第四篇:ORM、MySQL数据库连接池 第五篇:单例模式、蓝图Blueprint 第六篇:SQLALchemy基础知识 第七篇:wtfroms组件 阅读全文
posted @ 2018-01-26 20:17 Pythia丶陌乐 阅读(181) 评论(0) 推荐(0) 编辑
摘要: 阅读目录 第一篇:爬虫基本原理 第二篇:请求库之requests,selenium 第三篇:解析库之re、beautifulsoup、pyquery 第四篇:存储库之mongodb,redis,mysql 第五篇:爬虫高性能相关 第六篇:Scrapy框架 第七篇:分布式爬虫 参考资料:http:// 阅读全文
posted @ 2018-01-26 20:08 Pythia丶陌乐 阅读(147) 评论(0) 推荐(0) 编辑
摘要: 一 介绍 原来scrapy的Scheduler维护的是本机的任务队列(存放Request对象及其回调函数等信息)+本机的去重队列(存放访问过的url地址) 所以实现分布式爬取的关键就是,找一台专门的主机上运行一个共享的队列比如Redis,然后重写Scrapy的Scheduler,让新的Schedul 阅读全文
posted @ 2018-01-26 19:37 Pythia丶陌乐 阅读(170) 评论(0) 推荐(0) 编辑
摘要: 一 什么是VUE 它是一个构建用户界面的JavaScript框架,自动生成(js,css,HTML文件) 二 如何使用VUE 1. 应用vues.js 2. 展示html 3. 建立vue对象 <!DOCTYPE html> <html lang="en"> <head> <meta charset 阅读全文
posted @ 2018-01-26 15:31 Pythia丶陌乐 阅读(1854) 评论(0) 推荐(0) 编辑
摘要: 一 163邮箱登录tab切换 二 实现效果 三 Tab切换多页面 四 Tab切换多页面效果 阅读全文
posted @ 2018-01-25 17:43 Pythia丶陌乐 阅读(35265) 评论(0) 推荐(0) 编辑
摘要: 一 介绍 Scrapy一个开源和协作的框架,其最初是为了页面抓取 (更确切来说, 网络抓取 )所设计的,使用它可以以快速、简单、可扩展的方式从网站中提取所需的数据。但目前Scrapy的用途十分广泛,可用于如数据挖掘、监测和自动化测试等领域,也可以应用在获取API所返回的数据(例如 Amazon As 阅读全文
posted @ 2018-01-23 15:19 Pythia丶陌乐 阅读(544) 评论(0) 推荐(0) 编辑
摘要: 一 背景知识 爬虫的本质就是一个socket客户端与服务端的通信过程,如果我们有多个url待爬取,只用一个线程且采用串行的方式执行,那只能等待爬取一个结束后才能继续下一个,效率会非常低。 需要强调的是:对于单线程下串行N个任务,并不完全等同于低效,如果这N个任务都是纯计算的任务,那么该线程对cpu的 阅读全文
posted @ 2018-01-22 15:49 Pythia丶陌乐 阅读(209) 评论(0) 推荐(0) 编辑
摘要: 一 简介 MongoDB是一款强大、灵活、且易于扩展的通用型数据库1、易用性 2、易扩展性 3、丰富的功能 4、卓越的性能 二 MongoDB基础知识 1、文档是MongoDB的核心概念。文档就是键值对的一个有序集{'msg':'hello','foo':3}。类似于python中的有序字典。 2、 阅读全文
posted @ 2018-01-19 17:05 Pythia丶陌乐 阅读(261) 评论(0) 推荐(0) 编辑
摘要: 一 介绍 Beautiful Soup 是一个可以从HTML或XML文件中提取数据的Python库.它能够通过你喜欢的转换器实现惯用的文档导航,查找,修改文档的方式.Beautiful Soup会帮你节省数小时甚至数天的工作时间.你可能在寻找 Beautiful Soup3 的文档,Beautifu 阅读全文
posted @ 2018-01-19 17:01 Pythia丶陌乐 阅读(143) 评论(0) 推荐(0) 编辑
上一页 1 ··· 4 5 6 7 8 9 10 11 12 下一页