摘要：
磁盘容量 1. hdfs fsck /path/to/dicrectory 2. hdfs dfs du s /path/to/dicrectory 3. hdfs dfs du / 查看文件和目录大小 4. hdfs dfs count q /usr 会输出8列 | 命名空间的quota（限制文件 阅读全文
摘要：
avro agent 配置文件 启动agent 用以下脚本开启agent客户端，从以下信息中可以看到当前 agent 的 jmx 监控端口号是4154，且绑定4411端口。 启动文本传输 新开一个终端进行以下动作。 1. 创建一个文件 2. 开启文本传输 3. 可以从agent客户端看到文件的内容 阅读全文
摘要：
安装包 修改配置文件 环境变量 flume环境配置 shell cd $FLUME_HOME/conf cp flume env.sh.template flume env.sh vim flume env.sh export JAVA_HOME=/opt/soft/jdk1.8.0_144 set 阅读全文
摘要：
前期服务器配置 1. 修改/etc/hosts文件，添加以下信息（如果正常IP） 119.23.163.113 master 120.79.116.198 slave1 120.79.116.23 slave2 如果安全组内的IP，通过ip a方式查询内部IP并添加到/etc/hosts； 2. 确 阅读全文
摘要：
基本安装步骤 安装包下载 从 "大数据组件下载地址" 下载以下组件安装包 1. hadoop 2.6.0 cdh5.6.0.tar.gz 2. hbase 1.0.0 cdh5.6.0.tar.gz 3. zookeeper 3.4.5 cdh5.6.0.tar.gz 从 "java下载地址" 下载 阅读全文
摘要：
在本地编辑了n次笔记文档后，印象笔记、蚂蚁笔记、markdownpad、typora等等等，各有优缺点吧。最大的缺点就是当我离开的时候为了将这些笔记作为财富带走，我只有两种方法：1. 上传到服务器上 有的必须作为会员才能同步，虽然也只是一些钱，但是，感觉神烦2. 将文件copy到我的移动硬盘里 就怕漏了啥。。。每次都心慌慌的找了很多很多遍 之前有用... 阅读全文