上一页 1 ··· 12 13 14 15 16 17 18 19 20 ··· 28 下一页
摘要: redis介绍以及安装 一、redis介绍 redis是一个key-value存储系统。和Memcached类似,它支持存储的values类型相对更多,包括字符串、列表、哈希散列表、集合,有序集合。 这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作,而且这些操 阅读全文
posted @ 2019-08-18 13:04 MiaoQinHong 阅读(192) 评论(0) 推荐(0) 编辑
摘要: Github之协同开发 Github之协同开发 一、协同开发 1、引子:假如三个人共同开发同一份代码,每个人都各自安排了任务,当每个人都完成了一半的时候,提交不提交呢? 要提交,提交到dev吗,都上传了一半,这样回家拿出来的代码根本跑不起来。所以, 为每一个人创建一个分支,各自都在各自的分支上写代码 阅读全文
posted @ 2019-08-18 07:09 MiaoQinHong 阅读(1927) 评论(0) 推荐(0) 编辑
摘要: Git和Github的基本操作 一、GIT基本命令 二、了解Git和Github 1、什么是GIT? Git是一个免费、开源的版本控制软件 2、什么是版本控制系统? 版本控制是一种记录一个或若干个文件内容变化,以便将来查阅特定版本修订情况得系统。 系统具体功能 记录文件的所有历史变化 随时可恢复到任 阅读全文
posted @ 2019-08-18 07:08 MiaoQinHong 阅读(228) 评论(0) 推荐(0) 编辑
摘要: 列表查找以及二分查找 列表查找以及二分查找 一、列表查找 1、列表查找:从列表中查找指定元素 输入:列表、待查找元素 输出:元素下标或未查找到元素 2、顺序查找:从列表第一个元素开始,顺序进行搜索,直到找到为止。返回找到的那个索引3、二分查找:从有序列表的候选区data[0:n]开始,通过对待查找的 阅读全文
posted @ 2019-08-18 07:05 MiaoQinHong 阅读(157) 评论(0) 推荐(0) 编辑
摘要: 算法基础 算法基础 一、什么是算法? 算法(Algorithm):一个计算过程,解决问题的方法 一个算法应该具有以下七个重要的特征: ①有穷性(Finiteness):算法的有穷性是指算法必须能在执行有限个步骤之后终止; ②确切性(Definiteness):算法的每一步骤必须有确切的定义; ③输入 阅读全文
posted @ 2019-08-18 07:04 MiaoQinHong 阅读(300) 评论(0) 推荐(0) 编辑
摘要: 爬虫框架之Scrapy 一、介绍 二、安装 三、命令行工具 四、项目结构以及爬虫应用简介 五、Spiders 六、Selectors 七、Items 八、Item Pipelin 九、 Dowloader Middeware 十、Sider Middlewear 十一、自定义扩展 十二、setiti 阅读全文
posted @ 2019-08-17 23:29 MiaoQinHong 阅读(299) 评论(0) 推荐(0) 编辑
摘要: asynicio模块以及爬虫应用asynicio模块(高性能爬虫) asynicio模块以及爬虫应用asynicio模块(高性能爬虫) 一、背景知识 爬虫的本质就是一个socket客户端与服务端的通信过程,如果我们有多个url待爬取,只用一个线程且采用串行的方式执行,那只能等待爬取一个结束后才能继续 阅读全文
posted @ 2019-08-17 23:16 MiaoQinHong 阅读(352) 评论(0) 推荐(0) 编辑
摘要: 1、爬取校花网示例1: 1 import requests #pip3 install requests 2 import re 3 import hashlib 4 import time 5 6 movie_path=r'C:\mp4' 7 8 def get_page(url): 9 try: 阅读全文
posted @ 2019-08-17 23:10 MiaoQinHong 阅读(305) 评论(0) 推荐(0) 编辑
摘要: selenium模块 selenium模块 阅读目录 一、介绍 二、安装 三、基本使用 四、选择器 五、等待元素被加载 六、元素交互操作 七、其他 八、练习 一、介绍 selenium最初是一个测试工具,而爬虫中使用它主要是为了解决requests无法直接执行JavaScript代码的问题 sele 阅读全文
posted @ 2019-08-17 23:06 MiaoQinHong 阅读(655) 评论(0) 推荐(0) 编辑
摘要: 爬虫投递简历小示例 爬虫投递简历小示例 一、流程分析 第一步:获取登录页,获取X_Anti_Forge_Token,X_Anti_Forge_Code 1、请求url:https://passport.lagou.com/login/login.html 2、请求方式:get 3、请求头: - co 阅读全文
posted @ 2019-08-17 22:54 MiaoQinHong 阅读(355) 评论(0) 推荐(0) 编辑
上一页 1 ··· 12 13 14 15 16 17 18 19 20 ··· 28 下一页