摘要: 接着作业提交详解(上)继续写:在上一篇(hadoop2.7之作业提交详解(上))中已经讲到了YARNRunner.submitJob() [WordCount.main() -> Job.waitForCompletion() -> Job.submit() -> Job.connect() -> 阅读全文
posted @ 2019-07-31 14:40 一寸HUI 阅读(1689) 评论(0) 推荐(0) 编辑
摘要: #######linux文件系统管理########## 文件系统 文件系统这个名词大家都很陌生,不过如果说成分区,大家就比较容易理解了。原先每个分区只能格式化为一个文件系统,所以我们可以认为文件系统就是指分区。不过随着技术的进步,现在一个文件系统可以由几个分区组成,或者一个分区可以格式化为几个不同 阅读全文
posted @ 2019-07-27 14:56 一寸HUI 阅读(5881) 评论(0) 推荐(0) 编辑
摘要: 根据wordcount进行分析: 这上面是个简单wordcount的代码,这里就不一一说明了,我们首先看main方法:获取一个job对象,然后经过一系列的设置,最后调用waitForCompletion方法 接下来我们看下一调用waitForCompletion方法的这个类Job(由于类的内容很多, 阅读全文
posted @ 2019-07-24 17:17 一寸HUI 阅读(2556) 评论(0) 推荐(0) 编辑
摘要: 归档:也称为打包,指的是一个文件或目录的集合,而这个集合被存储在一个文件中。归档文件没有经过压缩,因此,它占用的空间是其中所有文件和目录的总和。压缩:压缩文件也是一个文件和目录的集合,且这个集合也被存储在一个文件中,但它们的不同之处在于,压缩文件采用了不同的存储方式,使其所占用的磁盘空间比集合中所有 阅读全文
posted @ 2019-07-24 09:47 一寸HUI 阅读(792) 评论(0) 推荐(0) 编辑
摘要: 一、进程与线程 进程:是代码在数据集合上的一次运行活动,是系统进行资源分配和调度的基本单位。 线程:是进程的一个执行路径,一个进程中至少有一个线程,进程中的多个线程共享进程的 资源。 虽然系统是把资源分给进程,但是CPU很特殊,是被分配到线程的,所以线程是CPU分配的基本单位。 二者关系: 一个进程 阅读全文
posted @ 2019-07-06 23:30 一寸HUI 阅读(87431) 评论(2) 推荐(31) 编辑
摘要: ################shell 模拟实现并发跑数#################有时候我们知道一些程序是可以同时跑的,互不影响,为了提高效率不得不使用并发跑脚本 #1、思路一我们都知道在linux中把程序丢后台跑脚本,我们可以同时跑很多个,这就是实现并发的思路,但是呢?如果我们一次性跑 阅读全文
posted @ 2019-07-05 17:42 一寸HUI 阅读(1548) 评论(0) 推荐(0) 编辑
摘要: ############grep命令############这个命令属于文本处理三大命令之一,强大的文本搜索工具(贪婪模式)全面搜索正则表达式并把行打印出来)是一种强大的文本搜索工具,它能使用正则表达式搜索文本,并把匹配的行打印出来。用于过滤/搜索的特定字符。可使用正则表达式能多种命令配合使用,使用 阅读全文
posted @ 2019-07-05 16:59 一寸HUI 阅读(4043) 评论(0) 推荐(0) 编辑
摘要: 一、什么是异常? 异常就是有异于常态,和正常情况不一样,有错误出错。在java中,阻止当前方法或作用域正常运行的情况,称之为异常。 二、异常体系 Java把异常当作对象来处理,并定义一个基类java.lang.Throwable作为所有异常的超类。在Java API中已经定义了许多异常类,这些异常类 阅读全文
posted @ 2019-07-02 14:27 一寸HUI 阅读(2187) 评论(0) 推荐(2) 编辑
摘要: #############java面向对象详解#############1、面向对象基本概念2、类与对象3、类和对象的定义格式4、对象与内存分析5、封装性6、构造方法7、this关键字8、值传递与引用传递?9、对象的一对一关系10、static关键字11、main方法分析12、继承13、对象的初始化 阅读全文
posted @ 2019-07-01 17:08 一寸HUI 阅读(41135) 评论(5) 推荐(30) 编辑
摘要: #############用户和用户组管理###################linux只认识UID和GID #可在/etc/passwd 和/etc/group中找到 ##/etc/passwd 详解[root@lgh2 ~]# cat /etc/passwdroot:x:0:0:root:/r 阅读全文
posted @ 2019-06-27 20:12 一寸HUI 阅读(510) 评论(0) 推荐(0) 编辑
摘要: ############linux 权限管理 ####################修改所有者和所属组chgrp -R groupname file/dirchown -R user:group file/dirdhown -R user file/dirchown -R :group file/ 阅读全文
posted @ 2019-06-27 16:50 一寸HUI 阅读(373) 评论(0) 推荐(0) 编辑
摘要: ##flink 1.7.2 安装需要java环境 下载地址 https://flink.apache.org/downloads.html#1、单机版 #创建用户flinkuseradd flink -d /home/flinkecho "flink123" | passwd flink --std 阅读全文
posted @ 2019-06-26 17:52 一寸HUI 阅读(1425) 评论(0) 推荐(0) 编辑
摘要: ##yum源安装#1、更新yumyum update #2、删除旧版本yum remove docker \docker-client \docker-client-latest \docker-common \docker-latest \docker-latest-logrotate \dock 阅读全文
posted @ 2019-06-24 17:26 一寸HUI 阅读(6578) 评论(0) 推荐(1) 编辑
摘要: 1、基本语法: 构造器分为主构造器和辅助构造器 class 类名(形参列表) { // 主构造器 // 类体 def this(形参列表) { // 辅助构造器 } def this(形参列表) { //辅助构造器可以有多个... } } //1. 辅助构造器 函数的名称this, 可以有多个,编译 阅读全文
posted @ 2019-05-30 22:54 一寸HUI 阅读(5136) 评论(1) 推荐(0) 编辑
摘要: 常在河边走哪有不湿鞋,常玩服务器哪有不搞挂几台,一不小心就搞挂了 今天删除 krb5-libs.x86_64下了狠功夫。。。。。 用了命令: rpm -e --nodeps krb5-libs.x86_64(这样的命令少用,会干掉依赖) 然后。。。悲剧了。。。yum不能用了,然后不能ssh连接服务器 阅读全文
posted @ 2019-05-30 22:42 一寸HUI 阅读(4500) 评论(5) 推荐(0) 编辑