摘要: 符号 作用 Linux通配符 * 匹配任意(0个或多个)字符或字符串,包括空字符串 ? 匹配任意1个字符,有且只有一个字符 [abcd] 匹配abcd中任何一个字符,abcd也可是其他任意不连续字符 [a-z] 匹配中a到z之间的任意一个字符, a到z表示范围,字符前后要连续,-表示范围的意思,也可 阅读全文
posted @ 2018-05-12 10:52 地铁昌平线 阅读(190) 评论(0) 推荐(0) 编辑
摘要: 1.1 容器简介 1.1.1 什么是 Linux 容器 Linux容器是与系统其他部分隔离开的一系列进程,从另一个镜像运行,并由该镜像提供支持进程所需的全部文件。容器提供的镜像包含了应用的所有依赖项,因而在从开发到测试再到生产的整个过程中,它都具有可移植性和一致性。 更加详细地来说,请您假定您在开发 阅读全文
posted @ 2018-05-11 16:03 地铁昌平线 阅读(261) 评论(0) 推荐(0) 编辑
摘要: 1.简介:Memcached 是一个高性能的分布式内存对象缓存系统,用于动态Web应用以减轻数据库负载。它通过在内存中缓存数据和对象来减少读取数据库的次数,从而提高动态、数据库驱动网站的速度。Memcached基于一个存储键/值对的hashmap。其守护进程(daemon )是用C写的,但是客户端可 阅读全文
posted @ 2018-05-09 18:09 地铁昌平线 阅读(132) 评论(0) 推荐(0) 编辑
摘要: 一、HDFS伪分布式环境搭建 Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时,它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统,适合部署在廉价的机器上。 阅读全文
posted @ 2018-05-09 18:06 地铁昌平线 阅读(217) 评论(0) 推荐(0) 编辑
摘要: (一)、HDFS shell操作 以上已经介绍了如何搭建伪分布式的Hadoop,既然环境已经搭建起来了,那要怎么去操作呢?这就是本节将要介绍的内容: HDFS自带有一些shell命令,通过这些命令我们可以去操作HDFS文件系统,这些命令与Linux的命令挺相似的,如果熟悉Linux的命令很容易就可以 阅读全文
posted @ 2018-05-09 18:05 地铁昌平线 阅读(176) 评论(0) 推荐(0) 编辑
摘要: YARN产生背景 YARN是Hadoop2.x才有的,所以在介绍YARN之前,我们先看一下MapReduce1.x时所存在的问题: 单点故障 节点压力大 不易扩展 MapReduce1.x时的架构如下: 可以看到,1.x时也是Master/Slave这种主从结构,在集群上的表现就是一个JobTrac 阅读全文
posted @ 2018-05-09 18:03 地铁昌平线 阅读(766) 评论(0) 推荐(0) 编辑
摘要: 1.1 分布式文件系统 1.1.1 什么是分布式文件系统 相对于本机端的文件系统而言,分布式文件系统(英语:Distributed file system, DFS),或是网络文件系统(英语:Network File System),是一种允许文件通过网络在多台主机上分享的文件系统,可让多机器上的多 阅读全文
posted @ 2018-04-30 18:26 地铁昌平线 阅读(241) 评论(0) 推荐(0) 编辑
摘要: 1.1 简述用户访网站流程 a 进行域名信息的DNS解析 dig +trace 获得www.oldboyedu.com ip地址信息 b 进行与网站服务器建立连接,tcp三次握手过程 (syn ack SEQ ACK/状态转换 closed listen syn_sent syn_rcvd esta 阅读全文
posted @ 2018-04-24 14:28 地铁昌平线 阅读(520) 评论(0) 推荐(1) 编辑
摘要: 阅读全文
posted @ 2018-04-24 12:27 地铁昌平线 阅读(92) 评论(0) 推荐(0) 编辑
摘要: 经过上次的面试,总结了一下的linux系统常用命令: 命令 功能说明 线上查询及帮助命令(2个) man 查看命令帮助,命令的词典,更复杂的还有info,但不常用。 help 查看Linux内置命令的帮助,比如cd命令。 文件和目录操作命令(18个) ls 全拼list,功能是列出目录的内容及其内容 阅读全文
posted @ 2018-04-24 12:03 地铁昌平线 阅读(325) 评论(0) 推荐(0) 编辑