随笔分类 - Linux
摘要：cat hadoop-env.sh export HADOOP_OPTS="$HADOOP_OPTS -Duser.timezone=GMT+08" cat yarn-env.sh YARN_OPTS="$YARN_OPTS -Duser.timezone=GMT+08" cat hbase-env
阅读全文
摘要：1、awk数组 1.1 数组结构 1.2 数组分类 索引数组：以数字为下标 关联数组：以字符串为下标 1.3 awk关联数组 现有如下文本，格式如下：即左边是随机字母，右边是随机数字, 即将相同的字母后面的数字加在一起，按字母的顺序输出 以$1为下标，创建数组a[$1]=a[$1]+$2 或者（a[
阅读全文
摘要：1、BEGIN模块 BEGIN模块在awk读取文件之前就执行 BEGIN模式常常被用来修改内置变量ORS、RS、FS、OFS等值 2、awk内置变量（预定义变量） 变量名属性 $0 当前记录，一整行 $1,$2,$3....$a 当前记录的第n个区域，区域间由FS分隔。 FS 输入区域分隔符，默认是
阅读全文
摘要：1、awk概述 awk不仅仅是Linux系统中的一个命令，而且是一种编程语言 它可以用来处理数据和生成报告（excel） 处理的数据可以是一个或多个文件 可以使直接来自标准输入、也可以是通过管道获取标准输入 awk可以在命令行上直接编辑命令进行操作，也可以写成awk程序来进行更为复杂的操作 2、aw
阅读全文
摘要：1、概述 大数据程序员为什么要学习Shell？ （1）需要看懂运维人员编写的shell程序 （2）偶尔会编写一些简单shell程序来管理集群、提高开发效率 Shell是 一个命令行解释器，它接收应用程序/用户命令，然后调用操作系统内核 Shell是一个功能强大的编程语言、易编写、易调试、灵活性强 2
阅读全文
摘要：7、搜索查找类 7.1 find查找文件或目录 find指令将从指定目录下递归地遍历各个子目录，将满足条件的文件显示在终端 语法 find【path】【选项】 选项说明 可使用的选项有二三十个之多，在此只介绍最常用的部份 选项 功能 -name<查询方式> 按照指定的文件名查找模式查找文件 -use
阅读全文
摘要：3、时间日期类 语法 date 【option】【+formart】 选项 选项 功能 -d<时间字符串> 显示指定的“时间字符串”表示的时间，而非当前时间 -s<日期时间> 设置系统日期时间 参数 参数 功能 <+日期时间格式> 指定显示时使用的日期时间格式 3.1 date 显示当前时间 语法
阅读全文
摘要：1、帮助命令 1.1 man获得帮助信息 基本语法 man【命令或配置文件】 显示说明 信息 功能 NAME 命令的名称和单行描述 SYNOPSIS 怎样使用命令 DESCRIPTION 命令功能的深入讨论 EXAMPLES 怎样使用命令的例子 SEE ALSO 相关主题（通常是手册页） 案例 ma
阅读全文
摘要：1、是什么 VI是Unix操作系统和类Unix操作系统中最通用的文本编辑器 VIM是从VI发展出来的一个性能更强大的文本编辑器。可以主动的以字体颜色辨别语法的正确性，方便程序设计。 VIM和VI完全兼容 2、一般模式 以vi打开一个文档就直接进入一般模式了。在这个模式中，你可以使用【上下左右】按键来
阅读全文
摘要：EOF自定义终止符用法 我们在脚本中经常会发现使用EOF的情况。EOF可以结合cat命令对内容进行追加。比如：执行脚本的时候，需要往一个文件里自动输入多行内容。如果是少数的几行内容，可以用echo命令追加，但如果是很多行，那么单纯用echo追加的方式就不太适合了。 1.语法格式： 文件内容
阅读全文
摘要：说明 1、笔记本主机IP为设置自动获取，不管什么情况下，不受虚拟机影响，只要连接外网就可以正常上网； 2、只要笔记本主机可以正常访问外网，启动虚拟机中的CentOS 7系统就可以正常访问外网，无需再进行任何设置； 3、虚拟机设置为固定IP，不管主机在什么网络环境下，是断网环境，还是连接任何网段访问外
阅读全文
摘要：内部错误 解决办法 1.关闭虚拟机后，单击VM，右键，以管理员身份运行。 2.找到电脑的 管理— Vmware workstation server ,默认状态下是手动，把他改为自动重启就可以啦。
阅读全文
