摘要: 1、如何指定yum源地址 cd /etc/yum.repos.d 可以指定centos、阿里云、163等,可自行百度搜索配置 2、如何自定义yum源 以centos集群为例制作yum源;当我们采用最小安装的方式安装完Linux系统后,会发现输入常用命令显示 没有该命令,一般做法就使用yum命令进行安 阅读全文
posted @ 2023-07-15 17:29 杰然不同2019 阅读(34) 评论(0) 推荐(0) 编辑
摘要: https://seevae.github.io/2020/09/12/%E8%AF%A6%E8%A7%A3kerberos%E8%AE%A4%E8%AF%81%E6%B5%81%E7%A8%8B/ 阅读全文
posted @ 2023-07-15 10:50 杰然不同2019 阅读(2) 评论(0) 推荐(0) 编辑
摘要: java版本: 1、自定义实现排序key,实现Ordered接口,根据指定的排序条件,重写compare 、less、greater等方法,封装多个字段进行排序; // 代码示例其中CategorySortKey为自定义的key JavaPairRDD<CategorySortKey, String 阅读全文
posted @ 2022-07-03 23:59 杰然不同2019 阅读(422) 评论(0) 推荐(0) 编辑
摘要: 什么计算运行在executor,什么算子运行在driver? (1)、foreachRdd运行在driver节点,因为它是操作dstream的。foreachPartition和foreach运行在worker节点,因为它是操作rdd的。foreachRdd开启对任务的启动,当执行到执行算子的时候开 阅读全文
posted @ 2022-06-13 17:07 杰然不同2019 阅读(562) 评论(0) 推荐(0) 编辑
摘要: 1. jps 查看java进程描述 2. jconsole图形化查看内存线程等信息 3.jstat 查看内存状况,用的较少 4.jstack 分析线程 jstack -l pid >> file 如: jstack -l 87239 >> /tmp/lj/lj.txt 5.jmap 查看内存信息或则 阅读全文
posted @ 2022-01-09 15:21 杰然不同2019 阅读(31) 评论(0) 推荐(0) 编辑
摘要: synchronized与lock的区别 2.volatile的可见性和禁止指令重排性是怎样实现的 DCL在面试中可能被问到的问题: volatile是否需要加? 答:需要加,在计算机指令中,, CPU和编译器为了提升程序的执行效率, 通常会按照一定的规则对指令进行优化, 如果两条指令互不依赖, 有 阅读全文
posted @ 2022-01-02 18:02 杰然不同2019 阅读(24) 评论(0) 推荐(0) 编辑
摘要: 重要:https://mp.weixin.qq.com/s/BnMobn2DRaZabBfApipOdg https://blog.csdn.net/q669239799/article/details/92394623 阅读全文
posted @ 2022-01-02 15:32 杰然不同2019 阅读(20) 评论(0) 推荐(0) 编辑
摘要: 今天开始认真学习hive了,先了解下hive的主要工作原理 阅读全文
posted @ 2021-12-25 15:50 杰然不同2019 阅读(86) 评论(0) 推荐(0) 编辑
摘要: 直接上代码,查看相关注释即可 object关键字及方法格式 /** * @Description: object: 关键字,声明一个单例对象(伴生对象) * @author : lijie * @date Date : 2021年10月16日 20:36 */ object HelloWorld { 阅读全文
posted @ 2021-10-17 22:56 杰然不同2019 阅读(33) 评论(0) 推荐(0) 编辑
摘要: <?xml version="1.0" encoding="UTF-8"?> <code_scheme name="GoogleStyle"> <option name="OTHER_INDENT_OPTIONS"> <value> <option name="INDENT_SIZE" value= 阅读全文
posted @ 2021-09-13 23:09 杰然不同2019 阅读(20) 评论(0) 推荐(0) 编辑