打赏
2018年5月7日
2.03_Python网络爬虫Http和Https
摘要： 一：HTTP和HTTPS HTTP协议（HyperText Transfer Protocol，超文本传输协议）：是一种发布和接收 HTML页面的方法，以明文的形式传输，效率高，但是不安全 HTTPS（Hypertext Transfer Protocol over Secure Socket La 阅读全文
posted @ 2018-05-07 09:48 QueryMarsBo 阅读(1812) 评论(0) 推荐(0) 编辑
2.02_Python网络爬虫分类及其原理
摘要： 一：通用爬虫和聚焦爬虫 根据使用场景，网络爬虫可分为 通用爬虫 和 聚焦爬虫 两种. 通用爬虫 通用网络爬虫是捜索引擎抓取系统（Baidu、Google、Yahoo等）的重要组成部分。主要目的是将互联网上的网页下载到本地，形成一个互联网内容的镜像备份。 通用搜索引擎（Search Engine）工作 阅读全文
posted @ 2018-05-07 09:40 QueryMarsBo 阅读(2885) 评论(0) 推荐(0) 编辑
2018年5月6日
2.01_Python网络爬虫概述
摘要： 一：什么是网络爬虫 网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取网络信息的程序或者脚本； 二：为什么要做网络爬虫？ 大数据时代，要进行数据分析，首先要有数据源，数据从何而来？ 在进行大数据分析或者进行数据挖掘的时候，数据源可以 阅读全文
posted @ 2018-05-06 22:28 QueryMarsBo 阅读(329) 评论(0) 推荐(0) 编辑
DA_03_linux网络配置及其远程连接
摘要： 一： 修改Linux的基本配置 直接运行：setup，根据提示修改 1.修改主机名：vi /etc/sysconfig/network 2.修改ip地址：vi /etc/sysconfig/network-scripts/ifcfg-eth0 service network restart inco 阅读全文
posted @ 2018-05-06 21:13 QueryMarsBo 阅读(182) 评论(0) 推荐(0) 编辑
2018年5月5日
DA_01_linux_物理机局域网工作机制
摘要： 一：物理机局域网工作机制： 二：域名服务的工作流程： 首先通过域名映射到IP地址，如果没有找到域名，向外部服务器DNS查询，然后通过IP地址访问服务器； 三：Vmware--NAT虚拟网络配置： 阅读全文
posted @ 2018-05-05 19:41 QueryMarsBo 阅读(180) 评论(0) 推荐(0) 编辑
2018年5月3日
Hadoop_01_Apache Hadoop概述
摘要： 摘自黑马课件 阅读全文
posted @ 2018-05-03 08:10 QueryMarsBo 阅读(251) 评论(0) 推荐(0) 编辑
2018年4月28日
13_Redis_持久化
摘要： 一：概述： Redis的高性能是山于其将所有数据都存储在了内存中，为了使Redis在重启之后仍能保证数据不丢失，需要将数据从内存中同步到硬盘中，这一过程就是持久化。 Redis支持两种方式的持久化，一种是RDB方式，一种是AOF方式心可以单独使用其中一种或将二者结合使用。 关系型数据库MySQL持久 阅读全文
posted @ 2018-04-28 15:30 QueryMarsBo 阅读(166) 评论(0) 推荐(0) 编辑
12_Redis_服务器命令
摘要： 一：Redis 服务器：Redis 服务器命令主要是用于管理 redis 服务 阅读全文
posted @ 2018-04-28 11:51 QueryMarsBo 阅读(175) 评论(0) 推荐(0) 编辑
10_Redis_多数据库
摘要： 一：概念： 一个Redis实例可以包括多个数据库，客户端可以指定连接某个redis实例的哪个数据库，就好比一个mysql中创建多个数据库，客户端连接时指定连接哪个数据库。 一个Redis实例最多可提供16个数据库，下标从0到15，客户端默认连接第0号数据库，也可以通过select选择连接哪个数据库， 阅读全文
posted @ 2018-04-28 11:39 QueryMarsBo 阅读(288) 评论(0) 推荐(0) 编辑
11_Redis_事务
摘要： 一：Redis 事务：目的为了进行Redis语句的批量化操作，不保证数据安全 Redis作为NoSQL数据库也同样提供了事务机制；在Redis中，MULTI/EXEC/DISCARD/这三个命令是我们实现事务的基石 二：Redis 事务特性： 三：Redis 事务命令：一个事务从开始到执行会经历以下 阅读全文
posted @ 2018-04-28 11:25 QueryMarsBo 阅读(141) 评论(0) 推荐(0) 编辑