在搬砖中找快乐的小张

摘要： 用法 {EXPLAIN | DESCRIBE | DESC} tbl_name [col_name | wild] {EXPLAIN | DESCRIBE | DESC} [explain_type] {explainable_stmt | FOR CONNECTION connection_id} 阅读全文

摘要： 今日箴言 逃避的事情都会回来找你 。 1. MySQL 安装 1.1MySQL 8.0.18安装 本次安装的是MySQL 8.0.18版本。 下载地址：https://downloads.mysql.com/archives/installer/ 一路下一步下一步就可完成安装.<赞 Winddows 阅读全文

摘要： 1.1 特点 内存数据库，速度快，也支持数据持久化 Redis不仅仅支持简单的key-value类型的数据，同时还提供List、Hash、Set、Sorted Set等多种数据类型 Redis支持数据的备份（master-slave）与集群（分片存储），以及拥有哨兵模式 支持事务 1.2 优势 性能 阅读全文

摘要： 环境准备 producer端maven依赖 <dependency> <groupId>org.springframework.kafka</groupId> <artifactId>spring-kafka</artifactId> </dependency> application.proper 阅读全文

摘要： zookeeper的安装 参考Zookeeper集群环境搭建 下载安装包 下载地址： http://archive.apache.org/dist/hbase/ (慢) http://mirrors.hust.edu.cn/apache/hbase/ (快) 上传到服务器并解压 修改配置文件 配置文 阅读全文

摘要： 概述 sqoop是apache旗下hadoop和关系型数据库之间传送数据的工具. 核心功能有两个： 导入、迁入 导出、迁出 导入数据：MySQL、Oracle、Sql Server(sqoop2系列支持)导入数据到HDFS、HIVE、HBASE等数据存储系统 导出数据:从Hadoop的文件系统中导出 阅读全文

摘要： 解压sqoop 下载sqoop安装包 下载地址： 解压到指定目录 修改文件夹名 配置sqoop 修改sqoop.properties (1).修改@LOGDIR@和@BASEDIR@的日志路径 (2).修改mapreduce.configuration.directory的目录 (3).配置环境变量 阅读全文

摘要： 客户端cli的命令 启动命令1 ./hive ./hive 启动命令2 beeline方式 beeline beeline 启动beline 创建table t1(id int,name String)后插入数据报错 启动时指定用户root JDBC方式连接 JDBC连接也需要连接到hiveServ 阅读全文

摘要： 下载安装包 Hive安装包传送门 hive-3.x版本与hadoop的3.x版本相对应。同理，2.x版本与hadoop2.x版本相对应。 上传到服务器 解压安装包 修改配置文件 在hive-env.sh文件的末尾添加下面三行内容 对hive-site.xml进行修改 在hadoop中修改core-s 阅读全文

摘要： 环境搭建准备 - 准备zookeeper环境（zookeeper-3.4.6） - 下载kafka安装包（kafka_2.12-2.1.0） - 上传到服务器 搭建kafka环境 # 解压kafka安装包到/usr/local tar -zxvf kafka_2.12-2.0.0.tgz -C /u 阅读全文