摘要: 1.查看是否安装了mysql 安装了 2.停止mysql服务,删除之前安装的mysql 3.查看之前老版本mysql的目录,并且删除老版本mysql的文件和库 find / -name mysql 查找结果: 删除对应的mysql目录: 4.再次查找机器是否安装mysql rpm -qa | gre 阅读全文
posted @ 2019-09-08 10:52 zhangqi00 阅读(1746) 评论(0) 推荐(0) 编辑
摘要: 1.为了方便启动kafka,我们在kafka的bin目录下写2个脚本。一个是启动zookeeper集群的脚本,一个是启动kafka集群的脚本 1.1 vim start-zks.sh 启动zookeeper集群的脚本 1.1.1给该文件赋权限 chmod 777 start-zks.sh 1.1.2 阅读全文
posted @ 2019-08-20 14:17 zhangqi00 阅读(182) 评论(0) 推荐(0) 编辑
摘要: 1. kafka是一个分布式消息队列。具有高性能、持久化、多副本备份、横向扩展能力。生产者往队列里写消息,消费者从队列里取消息进行业务逻辑。一般在架构设计中起到解耦、削峰、异步处理的作用。 1.1 broker:安装了kafka服务的机器称之为broker 1.2 topic(主题):是用来存放消息 阅读全文
posted @ 2019-08-20 10:15 zhangqi00 阅读(157) 评论(0) 推荐(0) 编辑
摘要: 1.安装kafka(单机版) 1.1上传 kafka_2.11-2.0.0.tgz 到 /root/Downloads 1.2解压 tar 包 tar -zxvf kafka_2.11-2.0.0.tgz 解压后:kafka_2.11-2.0.0 1.3删除 LICENSE、NOTICE 、site 阅读全文
posted @ 2019-08-20 09:15 zhangqi00 阅读(3817) 评论(0) 推荐(0) 编辑
摘要: 虚拟机联网步骤: 1.点击更改适配器选项 2.右击以太网--点击属性--共享--选择要共享的网卡 3.修改 ifcfg-eth0文件 vim /etc/sysconfig/network-scripts/ifcfg-eth0 注意:GATEWAY写的是本机的vmnet1的ip IPADDR写的是虚拟 阅读全文
posted @ 2019-08-19 20:58 zhangqi00 阅读(197) 评论(0) 推荐(0) 编辑
摘要: 1.分区(partitions) 分区器 partitioner hive = hdfs + mysql中的模板 我们分区是将hdfs中的数据分为多份 2.静态分区 例子,单个分区字段 创建一个temb表,分区字段 month 列与列用空格隔开 create table tem(id int,tem 阅读全文
posted @ 2019-05-12 16:23 zhangqi00 阅读(365) 评论(0) 推荐(0) 编辑
摘要: 一.克隆 1.右键--管理--克隆(注意:要在该虚拟机关闭的状态下才能克隆) 2. 3. 4. 5. 6. 7.克隆完毕 二. 修改物理地址、ip地址 1.1修改 vim /etc/udev/rules.d/70-persistent-net.rules 修改后 1.2 cd /etc/syscon 阅读全文
posted @ 2019-04-13 19:43 zhangqi00 阅读(170) 评论(0) 推荐(0) 编辑
摘要: 1.启动所有的线程服务 start-all.sh 记得要查看线程是否启动 jps 2.在根目录创建 wordcount.txt 文件 放置一些数据 3.创建 hdfs dfs -mkdir /文件夹名称 创建成功 4.将wordcount.txt文件放置 hadfs01下 放置成功 5.到如下图所示 阅读全文
posted @ 2019-04-10 21:06 zhangqi00 阅读(2344) 评论(0) 推荐(0) 编辑
摘要: 步骤 1.修改 hadoop-env.sh export JAVA_HOME=/root/Downloads/jdk1.7.0_79export HADOOP_HOME=/root/Downloads/hadoop-2.6.5 2.修改core-site.xml <property><name>fs 阅读全文
posted @ 2019-04-09 20:33 zhangqi00 阅读(271) 评论(0) 推荐(0) 编辑