摘要: ## 前言 之前在centos下搭建了伪分布式并且安装了MySQL,搭建了hadoop伪分布式集群以后,发现这是一个空的hadoop,只有YARN,MapReduce,HDFS,而这些实际上我们一般不会直接使用,而是需要另外部署Hadoop的其他组件,来辅助使用。比如我们把数据存储到了hdfs,都是 阅读全文
posted @ 2022-11-16 18:06 杨业壮 阅读(66) 评论(0) 推荐(0) 编辑
摘要: 前言 下面就来了解一下如何在 Windows 下连接服务器器并实现免密登录。 一、安装OpenSSH 在cmd命令行输入ssh后回车,如果出现以下内容说明已经安装OpenSSH 如果没有则需要自行安装: win + i 打开设置 -> 找到应用 -> 应用和功能 -> 可选功能 -> 添加功能, 安 阅读全文
posted @ 2022-11-16 18:06 杨业壮 阅读(871) 评论(0) 推荐(0) 编辑
摘要: 解压安装包: tar -zvxf mysql-5.7.30-linux-glibc2.12-x86_64.tar.gz -C /opt/ 重命名安装包 mv mysql-5.7.30-linux-glibc2.12-x86_64/ mysql 检查是否安装mariadb rpm -qa|grep m 阅读全文
posted @ 2022-11-16 18:06 杨业壮 阅读(192) 评论(0) 推荐(0) 编辑
摘要: python中的多线程是一个非常重要的知识点,但python 默认是单任务,所以今天简单的介绍一下多线程。 什么是线程: 线程也叫轻量级进程,是操作系统能够进行运算调度的最小单位,它被包涵在进程之中,是进程中的实际运作单位。 线程是进程中的一个实体,是CPU调度和分派的基本单位,线程自己不拥有系统资 阅读全文
posted @ 2022-11-16 18:06 杨业壮 阅读(2415) 评论(1) 推荐(0) 编辑
摘要: 一、WSL介绍 WSL即适用于 Linux 的 Windows 子系统。 什么是适用于 Linux 的 Windows 子系统? 适用于 Linux 的 Windows 子系统可让开发人员按原样运行 GNU/Linux 环境 - 包括大多数命令行工具、实用工具和应用程序 - 且不会产生虚拟机开销。 阅读全文
posted @ 2022-11-16 18:05 杨业壮 阅读(1410) 评论(0) 推荐(1) 编辑
摘要: 浅谈Java注解 什么是注解 注解的作用 常用注解 元注解 @Target @Retention @Repeatable @Inherited 定义注解 处理注解 使用注解 什么是注解 注解(Annotation)是放在Java源码的类、方法、字段、参数前的一种特殊“注释”。注释会被编译器直接忽略, 阅读全文
posted @ 2022-11-16 18:05 杨业壮 阅读(68) 评论(0) 推荐(0) 编辑
摘要: 一、确定ubuntu的磁盘分区 右键计算机 >> 管理 >> 磁盘管理,打开磁盘管理器后可以看到磁盘分区,确定要删除Ubuntu系统所在的分区。 Win10和Ubuntu都安装磁盘0下,前三个分区为win10分区,其中黄色方框内的分区是win10 EFI启动引导分区。 后四个分区是ubuntu分区, 阅读全文
posted @ 2022-11-16 18:05 杨业壮 阅读(733) 评论(0) 推荐(0) 编辑
摘要: 1.进行系统设置: 进入到 控制面板\所有控制面板项\程序和功能 中选择 启用或者关闭Windows功能 找到 适用于Linux的Windows子系统 并勾选,然后 确定 选择 立即重新启动 2.解压缩包 在微软官网自行下载需要的版本:(手动下载适用于 Linux 的 Windows 子系统 (WS 阅读全文
posted @ 2022-11-16 18:05 杨业壮 阅读(517) 评论(0) 推荐(0) 编辑
摘要: 动态添加,在不重启集群的情况下添加节点,对集群进行扩容 一.添加节点 1.配置新节点与namenode之间的ssh免密登陆 2.在主节点的 hosts添加主机名称,并且把该文件复制到集群中的其他节点上。 3.在Namenode节点的slaves文件中添加新节点的主机名或ip(用于下次重启的时候使用) 阅读全文
posted @ 2022-11-16 18:05 杨业壮 阅读(167) 评论(0) 推荐(0) 编辑
摘要: Flume参数配置详解 source 采集日志数据,将采集到的日志数据传输给channel channel 一个队列,存储source传递过来的数据 sink 从channel中获取数据,将数据输出到目标位置(HDFS、HBase、Source) Event 传输数据的单元,Flume中采集数据并传 阅读全文
posted @ 2022-11-16 18:05 杨业壮 阅读(195) 评论(0) 推荐(0) 编辑