摘要： hive.optimize.cp=true：列裁剪 hive.optimize.prunner：分区裁剪 hive.limit.optimize.enable=true：优化LIMIT n语句 hive.limit.row.max.size=1000000： hive.limit.optimi... 阅读全文

摘要： 一、分区表创建与说明 必须在表定义时创建partition a、单分区建表语句：create table day_table (id int, content string) partitioned by (dt string);单分区表，按天分区，在表结构中存在id，content，d... 阅读全文

摘要： 1、Hive架构与基本组成 下面是Hive的架构图。 图1.1 Hive体系结构 Hive的体系结构可以分为以下几部分： （1）用户接口主要有三个：CLI，Client 和 WUI。其中最常用的是CLI，Cli启动的时候，会同时启动一个Hive副本。Cl... 阅读全文

摘要： 转自：http://blog.csdn.net/zhoudaxia/article/details/8842576 1、安装与配置 Hive是建立在Hadoop上的数据仓库软件，用于查询和管理存放在分布式存储上的大规模数据集。它提供： （1）一系列的工具，可以方便地对数... 阅读全文

摘要： 说明：以下标红且加大括号的均需要替换为实际待查询的表名或数据库名。 【1】、统计某张或某几张表的数据量： select count(*) from {TABLE_NAME}; #or select count(1) from {TABLE_NAME}; #or 统计一个列项，如ID se... 阅读全文

摘要： 【1】. 快速创建相同结构的表，包括索引： mysql> SHOW CREATE TABLE a;CREATE TABLE `a` ( `name` varchar(50) default NULL, KEY `name` (`name`)) ENGINE=MyISAM DEFAULT ... 阅读全文

摘要： 1虚拟网络设置 默认情况下，VMware Workstation的虚拟网卡使用192.168.1.0~192.168.254.0范围中的（子网掩码为255.255.255.0）两个网段（对应于第一块虚拟网卡VMnet1和第2块虚拟网卡VMnet8），即使在同一台主机上安装VMware，在每次安装... 阅读全文

摘要： lsof全名list opened files，也就是列举系统中已经被打开的文件。我们都知道，linux环境中，任何事物都是文件， 设备是文件，目录是文件，甚至sockets也是文件。所以，用好lsof命令，对日常的linux管理非常有帮助。 常用参数 lsof 常见的用法是查找应用程序... 阅读全文

摘要： 1. 如何记忆这两个命令 du-Disk Usage df-Disk Free 2. df 和du 的工作原理 2.1 du的工作原理 du命令会对待统计文件逐个调用fstat这个系统调用，获取文件大小。它的数据是基于文件获取的，所以有很大的灵活性，不一定非要针对一个分区，可以跨越多... 阅读全文

摘要： 一、基本介绍 1、版本 httpd-1.3 httpd-2.0 httpd-2.2 httpd-2.4 目前为止最新的版本是httpd-2.4.6，但是这里我用的是系统自带的RPM包安装的httpd-2.2.15版本的，最新版本配置可能会有所不同 2、模型： 高度模块化：DSO... 阅读全文