09 2016 档案

linux date命令
摘要：date -d <字符串>：显示当前字符串中所指的时间和日期 date +%s：从 1970 年 1 月 1 日 00:00:00 UTC 到目前为止的秒数 下面例子就是从 1970 年 1 月 1 日 00:00:00 UTC 到目前20160101（Fri Jan 1 00:00:00 CST 阅读全文
posted @ 2016-09-28 15:51 Xu Feng 阅读(334) 评论(0) 推荐(0) 编辑
linux shell中'',""和``的区别
摘要：今天学习一个bash脚本，看到有一条：bin=`dirname "$0"` （dirname filename是输出该文件所在的目录，$0是该bash文件的文件名，在bash中一般使用cd `dirname $0`进入该脚本所在的目录中） 我尝试着cat $bin 输出是：. 然后我将反引号``去掉 阅读全文
posted @ 2016-09-28 00:51 Xu Feng 阅读(37646) 评论(0) 推荐(2) 编辑
Java中关于nextInt()、next()和nextLine()的理解
摘要：先看解释： nextInt(): it only reads the int value, nextInt() places the cursor in the same line after reading the input. next(): read the input only till t 阅读全文
posted @ 2016-09-21 15:33 Xu Feng 阅读(77016) 评论(3) 推荐(9) 编辑
关于YARN Node Labels的一点理解
摘要：最近在做实验，实验需要进行分区域计算，网上查了资料后发现Yarn Node Labels + Capacity-Scheduler可以实现我的需求 但是当任务提交到capacity-scheduler调度器的default队列时，任务卡在ACCEPTED阶段。 网上看了很多发现没有这方面的信息，最后 阅读全文
posted @ 2016-09-13 19:51 Xu Feng 阅读(9122) 评论(0) 推荐(0) 编辑
CentOS配置Hive
摘要：hive搭建共分为三种模式：1、embedded，2、local，3、remote server 在这里，主要是配置第3种模式：remote server模式，如下图所示： 我的环境共三台虚拟机：Host0,Host2，Host3 在remote server模式中，Host0：Hive-serve 阅读全文
posted @ 2016-09-11 23:10 Xu Feng 阅读(2179) 评论(0) 推荐(0) 编辑
CentOS中配置Kafka集群
摘要：环境：三台虚拟机Host0，Host1，Host2 Host0：192.168.10.2 Host1: 192.168.10.3 Host2: 192.168.10.4 在三台虚拟机上配置zookeeper，具体配置详见CentOS中配置CDH版本的ZooKeeper 下载kafka：http:// 阅读全文
posted @ 2016-09-05 14:06 Xu Feng 阅读(2471) 评论(0) 推荐(1) 编辑
CentOS中配置CDH版本的ZooKeeper
摘要：三台CentOS：Host0，Host1，Host2 在三台中分别安装zookeeper-server 修改zookeeper的配置文件（/etc/zookeeper/conf/zoo.cfg） 因为zookeeper集群共有3个节点，所以在配置文件中添加server.0，server.1，serv 阅读全文
posted @ 2016-09-03 13:01 Xu Feng 阅读(4487) 评论(0) 推荐(0) 编辑
关于Flume中Chanel.Selector.header解释
摘要：flume内置的ChannelSelector有两种，分别是Replicating和Multiplexing。 Replicating类型的ChannelSelector会针对每一个Event，拷贝到所有的Channel中，这是默认的ChannelSelector。 replicating类型的Ch 阅读全文
posted @ 2016-09-02 00:42 Xu Feng 阅读(4156) 评论(0) 推荐(0) 编辑