摘要: CentOS 7不带Mysql数据库了,默认的数据库是MariaDB(Mysql的一个分支)。 可以按照以下步骤手动安装Mysql数据库。 0. 看起来mysql又提供yum安装了。 yum install mysql-server 后面的没时间可以不看了。 1. 下载rpm安装文件 wget ht 阅读全文
posted @ 2018-04-12 21:47 Black&Fish 阅读(3057) 评论(0) 推荐(0) 编辑
摘要: Spark的代码是在GitHub上托管的,如果想看源码,可以访问:GitHub。至于SparkStreaming等功能,有个测试案例的包, sparkStreaming的案例地址:https://github.com/apache/spark/blob/master/examples/src/mai 阅读全文
posted @ 2018-04-06 18:39 Black&Fish 阅读(315) 评论(0) 推荐(0) 编辑
摘要: HBase命令 1.启停 $> start-hbase.sh $> stop-hbase.sh HBase shell $> hbase shell $hbase> help // 查看帮助 $hbase> help "put" // 查看 put 命令 的帮助 $hbase> put // ins 阅读全文
posted @ 2018-04-06 16:38 Black&Fish 阅读(111) 评论(0) 推荐(0) 编辑
摘要: 一、HBase概述 1、简介 1.11.介绍 是分布式 面向列族 的数据库,构建在hadoop之上. 类似于google的big table,对海量结构化数据的快速随机访问。 是hadoop生态系统的一部分,提供随机实时读写。 1.2.hbase和hadoop的区别 hdfs hbase 1) 分布 阅读全文
posted @ 2018-04-06 16:37 Black&Fish 阅读(136) 评论(0) 推荐(0) 编辑
摘要: 一、准备工作 现在有3台机器,这里以centos6.8为例,以minimal方式安装 192.168.1.101 192.168.1.102 192.168.1.103 1、在3台节点上都先关闭防火墙 iptables –F chkconfig iptables off setenforce 0 编 阅读全文
posted @ 2018-04-05 22:35 Black&Fish 阅读(170) 评论(0) 推荐(0) 编辑
摘要: 背景: 从Nginx中间件采集web项目产生的滚动日志。通过本地服务器(简称:A服务)的Flume采集日志,然后传输到另外一台服务器(简称:B服务器)的Flume上,然后暂存到 B服务器 的Kafka中。 为了展示效果,通过Kafka的consumer进行消费,打印到字符界面。 1、Flume的配置 阅读全文
posted @ 2018-04-05 15:20 Black&Fish 阅读(389) 评论(0) 推荐(0) 编辑