上一页 1 ··· 13 14 15 16 17 18 19 20 21 ··· 40 下一页
摘要: 一、容器的创建 容器是指Docker对外提供服务的一个实例。 #1.创建容器的格式: docker run [option] image [cmd] #2.示例 [root@m01 ~]# docker run -d --name nginx -p 80:80 nginx 87594f40bacdc 阅读全文
posted @ 2021-09-13 16:17 年少纵马且长歌 阅读(86) 评论(0) 推荐(0) 编辑
摘要: Docker镜像是Docker中三大概念之一,其主要作用是作为启动容器的模板。 一、下载镜像 #1.含义 镜像是运行容器的模板,官方Docker Hub 仓库已经提供了许多镜像共开发者使用。如果我们需要获取某个镜像则可以去Docker仓库下载所需的镜像。 #2.格式: docker pull [指定 阅读全文
posted @ 2021-09-13 14:17 年少纵马且长歌 阅读(136) 评论(0) 推荐(0) 编辑
摘要: Ubuntu操作系统对Docker的支持十分成熟,可以支持包括x86_64、armhf等系统架构,只要是64位即可。 Docker目前支持最低Ubuntu版本为14.04LTS,但实际上从稳定性上考虑,推荐使用16.04LTS 或18.04LTS版本,并且系统内核越新越好,以支持Docker最新的特 阅读全文
posted @ 2021-09-13 13:32 年少纵马且长歌 阅读(151) 评论(0) 推荐(0) 编辑
摘要: 一、查看系统内核版本号 1.查看系统内核版本号 [root@m01 ~]# uname -a Linux m01 3.10.0-957.el7.x86_64 #1 SMP Thu Nov 8 23:39:32 UTC 2018 x86_64 x86_64 x86_64 GNU/Linux 2.备份原 阅读全文
posted @ 2021-09-13 12:20 年少纵马且长歌 阅读(622) 评论(0) 推荐(0) 编辑
摘要: 一、背景 为了完成那些不愉快或者平庸的任务,你也会喜欢只做必需之事。这可能是因为你同样喜欢使用一个简单易用的工具,来解决那些复杂或费时的工作。 假设你想尝试一款新的Linux 软件,但是担心运行起来的是恶意代码。为了保护你的机器,在 Docker 中运行该软件是很好的第一步。因为Docker 可以帮 阅读全文
posted @ 2021-09-13 12:10 年少纵马且长歌 阅读(77) 评论(0) 推荐(0) 编辑
摘要: 一、Hadoop小文件优化方法 1.Hadoop小文件弊端 HDFS上每个文件都要在NameNode上创建对应的元数据,这个元数据的大小约为150byte,这样当小文件比较多的时候,就会产生很多的元数据文件,一方面会大量占用NameNode的内存空间,另一方面就是元数据文件过多,使得寻址索引速度变慢 阅读全文
posted @ 2021-09-10 17:20 年少纵马且长歌 阅读(102) 评论(0) 推荐(0) 编辑
摘要: 一、Resourcemanager相关 yarn.resourcemanager.scheduler.client.thread-count ResourceManager处理调度器请求的线程数量 yarn.resourcemanager.scheduler.class 配置调度器 二、Nodema 阅读全文
posted @ 2021-09-10 17:19 年少纵马且长歌 阅读(105) 评论(0) 推荐(0) 编辑
摘要: 一、MapReduce跑的慢的原因 MapReduce程序效率的瓶颈在于两点: #1.计算机性能 CPU、内存、磁盘、网络 #2.I/O操作优化 1)数据倾斜 2)Map运行时间太长,导致Reduce等待过久 3)小文件过多 二、MapReduce常用调优参数 #1.自定义分区,减少数据倾斜; 定义 阅读全文
posted @ 2021-09-10 17:18 年少纵马且长歌 阅读(72) 评论(0) 推荐(0) 编辑
摘要: 一、 Apache和Apache集群间数据拷贝 #1.scp实现两个远程主机之间的文件复制 scp -r hello.txt root@hadoop103:/user/delopy/hello.txt // 推 push scp -r root@hadoop103:/user/delopy/hell 阅读全文
posted @ 2021-09-10 16:08 年少纵马且长歌 阅读(123) 评论(0) 推荐(0) 编辑
摘要: 一、NameNode故障处理 1.需求 NameNode进程挂了并且存储的数据也丢失了,如何恢复NameNode 2.故障模拟 #1.kill -9 NameNode进程 [delopy@hadoop102 current]$ kill -9 19886 #2.删除NameNode存储的数据(/op 阅读全文
posted @ 2021-09-09 12:18 年少纵马且长歌 阅读(144) 评论(0) 推荐(0) 编辑
上一页 1 ··· 13 14 15 16 17 18 19 20 21 ··· 40 下一页