摘要:
HIVE 命令记录 设置hive运行的队列 打印列名 创建新表 正则匹配表名 增加一个字段 重命令表名 从HDFS加载数据 导入数据t_hive.txt到t_hive表 从其他表导入数据 创建表并从其他表导入数据 仅复制表结构不导数据 通过Hive导出到本地文件系统 创建视图 删表 创建分区表 导入 阅读全文
摘要:
进入hbase 客户端命令行: hbase shell 根据rowkey获取单条数据: get 'HXXT_ns:app_test_hbase', 'rowkey值' 范围查询,并指定数据量: scan 'HXXT_ns:app_test_hbase',COLUMNS => ['f1:cust_na 阅读全文
摘要:
1、进入hadoop的配置目录 ,找到 环境变量的 $HADOOP_HOME cd $HADOOP_HOME 2、修改dataNode 节点的 单个map的能使用的内存配置 找到配置的文件: /opt/aisc/app/hadoop-2.3.0-cdh5.1.2/etc/hadoop/mapred- 阅读全文
摘要:
hadoop 执行jar 输出的目录 必须要不存在的 yarn jar dpi-hadoop-1.0.0.jar MapReduceJob /test/lilin/input /test/lilin/out/dpi 查看目录大小 hdfs fsck /test/dpi/dpi_out/2016120 阅读全文