摘要：
#scala ##1.字符串 ###1.1传值字符串 object ScalaString { def main(args: Array[String]): Unit = { // 传值字符串(格式化字符串) printf("name=%s\n", name) } } ###1.2插值字符串 obj 阅读全文
摘要：
脚本存放位置 /home/atguigu 要不然就是sudo ./xsync /etc/profile.d/my_env.sh 要是不行的话 sudo vim /etc/sudoers 在文件中添加家目录 最后实在不行的话 把脚本文件放到/usr/bin下面 阅读全文
摘要：
#数据结构 ##数据的结构的三个方面 1.逻辑结构 数据元素之间的逻辑关系 2.存储结构（物理结构） 数据元素及其关系在计算机内存中的表示（又称为映像） 3.运算与实现 对数据元素可以施加的操作以及这些操作在相应的存储结构上的实现 ###逻辑结构 划分方式一 1.线性结构 有且仅有一个开始和一个终端 阅读全文
摘要：
#hbase ##1.hbase简介 ###1.1hbase定义 HBase是一种分布式、可扩展、支持海量数据存储的NoSQL数据库 ###1.2HBase数据模型 逻辑上，HBase的数据模型同关系型数据库很类似，数据存储在一张表中，有行有列。但从HBase的底层物理存储结构（K-V）来看，HBa 阅读全文
摘要：
#Error:java: 错误: 不支持发行版本 5 https://blog.csdn.net/qq_42583206/article/details/108375173 阅读全文
摘要：
#Redis ##1.redis安装 （1）下载redis-3.2.5.tar.gz并解压tar -zxvf redis-3.2.5.tar.gz -C /opt/module （2）cd redis-3.2.5 （3）安装C、C语言的编译环境 yum install -y gcc-c （4）在re 阅读全文
摘要：
#大数据需求衍生出的各种框架 ##1. 早期的MR 资源分配 计算 后来yarn 引入 作为资源分配 hive 将mr包装成sql 减少代码量 flume 端口 日志 mysql 音频 图片 数据 来源-去向 单独写一段代码 有flume 一个配置文件 kafka flume-kafka-spark 阅读全文
摘要：
##Hbase和Hive Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。HBase是Hadoop的数据库，一个分布式、可扩展、大数据的存储。单个的从字面意思上或许很难看出二者的 阅读全文
摘要：
#Zookeeper 搭建 ##1.解压安装 （1）解压Zookeeper安装包到/opt/module/目录下 tar -zxvf zookeeper-3.5.7.tar.gz -C /opt/module/ （2）修改/opt/module/apache-zookeeper-3.5.7-bin名 阅读全文
摘要：
#linux 常用脚本 记住写完脚本后都要执行 chmod +x 脚本名称 否则没有执行权限 ##1.查看集群中的进程 myjps.sh #!/bin/bash for host in hadoop102 hadoop103 hadoop104 do echo " $host " ssh $host 阅读全文