2019年5月17日
hive的数据倾斜
1.数据倾斜的解决方案 1.1参数调节 hive.map.aggr=true Map 端部分聚合，相当于Combiner hive.groupby.skewindata=true 有数据倾斜的时候进行负载均衡，当选项设定为 true，生成的查询计划会有两个 MR Job。第一个 MR Job 中，M Read More
posted @ 2019-05-17 11:14 kwz Views(235) Comments(0) Diggs(0) Edit
Hue
1.下载hue http://archive.cloudera.com/cdh5/cdh/5/hue-3.7.0-cdh5.3.6.tar.gz 2.编译hue make apps yum search python | grep -i devel yum install python-devel. Read More
posted @ 2019-05-17 10:55 kwz Views(141) Comments(0) Diggs(0) Edit