05 2018 档案

摘要:ZooKeeper集群的一些基本概念 zookeeper集群搭建: zk集群,主从节点,心跳机制(选举模式) 配置数据文件 myid 1/2/3 对应 server.1/2/3 通过 zkCli.sh -server [ip]:[port] 命令检测集群是否配置成功 和其他大多数集群结构一样,zoo 阅读全文
posted @ 2018-05-18 22:27 地铁昌平线 阅读(310) 评论(0) 推荐(0) 编辑
摘要:符号 作用 Linux通配符 * 匹配任意(0个或多个)字符或字符串,包括空字符串 ? 匹配任意1个字符,有且只有一个字符 [abcd] 匹配abcd中任何一个字符,abcd也可是其他任意不连续字符 [a-z] 匹配中a到z之间的任意一个字符, a到z表示范围,字符前后要连续,-表示范围的意思,也可 阅读全文
posted @ 2018-05-12 10:52 地铁昌平线 阅读(193) 评论(0) 推荐(0) 编辑
摘要:1.1 容器简介 1.1.1 什么是 Linux 容器 Linux容器是与系统其他部分隔离开的一系列进程,从另一个镜像运行,并由该镜像提供支持进程所需的全部文件。容器提供的镜像包含了应用的所有依赖项,因而在从开发到测试再到生产的整个过程中,它都具有可移植性和一致性。 更加详细地来说,请您假定您在开发 阅读全文
posted @ 2018-05-11 16:03 地铁昌平线 阅读(261) 评论(0) 推荐(0) 编辑
摘要:1.简介:Memcached 是一个高性能的分布式内存对象缓存系统,用于动态Web应用以减轻数据库负载。它通过在内存中缓存数据和对象来减少读取数据库的次数,从而提高动态、数据库驱动网站的速度。Memcached基于一个存储键/值对的hashmap。其守护进程(daemon )是用C写的,但是客户端可 阅读全文
posted @ 2018-05-09 18:09 地铁昌平线 阅读(132) 评论(0) 推荐(0) 编辑
摘要:一、HDFS伪分布式环境搭建 Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时,它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统,适合部署在廉价的机器上。 阅读全文
posted @ 2018-05-09 18:06 地铁昌平线 阅读(221) 评论(0) 推荐(0) 编辑
摘要:(一)、HDFS shell操作 以上已经介绍了如何搭建伪分布式的Hadoop,既然环境已经搭建起来了,那要怎么去操作呢?这就是本节将要介绍的内容: HDFS自带有一些shell命令,通过这些命令我们可以去操作HDFS文件系统,这些命令与Linux的命令挺相似的,如果熟悉Linux的命令很容易就可以 阅读全文
posted @ 2018-05-09 18:05 地铁昌平线 阅读(176) 评论(0) 推荐(0) 编辑
摘要:YARN产生背景 YARN是Hadoop2.x才有的,所以在介绍YARN之前,我们先看一下MapReduce1.x时所存在的问题: 单点故障 节点压力大 不易扩展 MapReduce1.x时的架构如下: 可以看到,1.x时也是Master/Slave这种主从结构,在集群上的表现就是一个JobTrac 阅读全文
posted @ 2018-05-09 18:03 地铁昌平线 阅读(766) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示