摘要:
<!--[if !supportLists]-->5 <!--[endif]-->Shell传递参数 我们可以在执行 Shell 脚本时,向脚本传递参数, 脚本内获取参数的格式为:$n。n 代表一个数字,1 为执行脚本的第一个参数,2 为执行脚本的第二个参数,以此类推…… 1.1 实例 以下实例我们 阅读全文
摘要:
1.在linux系统创建文件 vi aa.txt i 进行编辑 输入 内容(多个单词例如:aa bb cc aa) 2.在HDFS上面创建文件夹 hdfs dfs -mkdir /cc hdfs dfs -ls 3.将本地文件放到hdfs上面 hdfs dfs -put aa.txt /cc hdf 阅读全文
摘要:
Shell 编程跟 java、php 编程一样,只要有一个能编写代码的文本编辑器和一个能解释执行的脚本解释器就可以了。(Linux系统中自带编译器) .java >javac xx.java java Linux 的 Shell 编程解析器种类众多,常见的有: l Bourne Shell(/usr 阅读全文
摘要:
12 getmerge:合并到本地 (hdfs) 阅读全文
摘要:
阅读全文
摘要:
重新删掉.ssh 秘钥文件 重新生成文件 配置免密 cd ~ 》》ls -la 》》 rm -rf .ssh <property> <name>yarn.resourcemanager.webapp.address</name> <!--web服务器的端口 --> <value>linux01:80 阅读全文
摘要:
保存 重启电脑 打开Linux系统 阅读全文
摘要:
LZO 库实现了许多有下述特点的算法: * 解压简单,速度非常快。 * 解压不需要内存。 * 压缩相当地快。 * 压缩需要 64 kB 的内存。 * 允许在压缩部分以损失压缩速度为代价提高压缩率,解压速度不会降低。 * 包括生成预先压缩数据的压缩级别,这样可以得到相当有竞争力的压缩比。 * 另外还有 阅读全文
摘要:
Snappy 在 Google 内部被广泛的使用,从 BigTable 到 MapReduce 以及内部的 RPC 系统。 [1] snappy 是一个压缩库。它可以利用单颗Intel Corei7处理器内核处理至少每秒250MB~500MB的数据流。 snappy 的前身是Zippy。虽然只是一个 阅读全文
摘要:
8:00 2019/3/141:什么是hadoop? hadoop是解决大数据问题的一整套技术方案 2:hadoop的组成? 核心框架 分布式文件系统 分布式计算框架 分布式资源分配框架 hadoop对象存储 机器计算 3:hadoop 云计算 大数据 微服务 人工智能关系 参见word学习文档 1. 现阶段,云计算的两大底层支撑技术为“虚拟化”和“大数据技术” 2. 而H... 阅读全文