摘要: 数据获取的方式主要可以分为两种: 1.网站日志文件(log files) 页面埋点js自定义的采集. 1.网站日志文件(log files) 页面埋点js自定义的采集. 优缺点: web服务器自带的日志记录功能:优点方便,缺点信息收集不全 自定义的js埋点收集:优点想收集啥就收集啥,缺点需要系统的开 阅读全文
posted @ 2019-05-16 10:30 zhangqi0828 阅读(1029) 评论(0) 推荐(0) 编辑
摘要: 三台机器zookeeper的集群环境搭建 Zookeeper 集群搭建指的是 ZooKeeper 分布式模式安装。 通常由 2n+1台 servers 组成。 这是因为为了保证 Leader 选举(基于 Paxos 算法的实现) 能过得到多数的支持,所以 ZooKeeper 集群的数量一般为奇数。Z 阅读全文
posted @ 2019-05-16 09:37 zhangqi0828 阅读(1046) 评论(0) 推荐(0) 编辑
摘要: 阻塞与非阻塞:讲究的是服务端在数据没有准备好的情况下服务端如何响应同步与非同步:讲究的是cpu在数据没有准备好的情况下如何响应 阅读全文
posted @ 2019-05-16 09:24 zhangqi0828 阅读(98) 评论(0) 推荐(0) 编辑
摘要: zookeeper是一个分布式的协调服务框架 其本质是一个分布式的小文件存储系统,可以存储一些小的文件,官方建议每个小文件不要超过一兆 zk一般都是装奇数台,便于zk内部的一些投票选举 leader:zk集群当中的主节点,主要用于处理事务性请求以及非事务性请求 follower:主要用于处理非事务性 阅读全文
posted @ 2019-05-16 09:22 zhangqi0828 阅读(117) 评论(0) 推荐(0) 编辑
摘要: CentOS 6 Linux防火墙 service iptables status (功能描述:查看防火墙状态) chkconfig iptables –list (功能描述:查看防火墙开机启动状态) service iptables stop (功能描述:临时关闭防火墙) chkconfig ip 阅读全文
posted @ 2019-05-16 09:04 zhangqi0828 阅读(258) 评论(0) 推荐(0) 编辑
摘要: 配置hadoop的HA大概可以分为以下几步: 配置zookpeer(namenode之间的通信要靠zk来实现) 配置hadoop的 hadoop-env.sh hdfs-site.xml core-site.xml slave hadoop-env.sh hdfs-site.xml core-sit 阅读全文
posted @ 2019-05-16 01:02 zhangqi0828 阅读(166) 评论(0) 推荐(0) 编辑