摘要:
Impala简介 Impala是Cloudera公司主导开发的新型查询系统,它提供SQL语义,能查询存储在Hadoop的HDFS和HBase中的PB级大数据。 已有的Hive系统虽然也提供了SQL语义,但由于Hive底层执行使用的是MapReduce引擎,仍然是一个批处理过程,难以满足查询的交互性。 阅读全文
摘要:
阅读全文
摘要:
5.x的CDH各个组件版本信息https://docs.cloudera.com/documentation/enterprise/release-notes/topics/cdh_vd_cdh_package_tarball.htm 6.x的CDH各个组件版本信息https://docs.clou 阅读全文
摘要:
方法1 :通过行号来进行加减 1.新建表1添加自增行号列(考虑到自增id 有丢失数据现象) 2.复制上表1为表2 3.根据表1、表2行号进行where或者left join on的处理 * where 进行处理的条件为表1表2完全的匹配 *left join on 处理的条件为 左表完全的匹配 #设 阅读全文
摘要:
impala 默认配置不是中国时区,所以格式化时间戳的时候 用from_unixtime ,有八个小时的时间差如果不重启impala服务 可以用时间函数增加8小时,暂时获取正确的格式化日期:hours_add(from_unixtime(cast(substring( TIME_STAMP,1,10 阅读全文
摘要:
MySQL 事务主要用于处理操作量大,复杂度高的数据。比如说,在人员管理系统中,你删除一个人员,你既需要删除人员的基本资料,也要删除和该人员相关的信息,如信箱,文章等等,这样,这些数据库操作语句就构成一个事务! 1.在 MySQL 中只有使用了 Innodb 数据库引擎的数据库或表才支持事务。 2. 阅读全文
摘要:
进程与线程的概念 程序是由指令和数据组成的, 但是指令需要运行, 数据要读写, 就必须将指令加载至cpu, 数据加载至内存。 java中线程是最小的调度单位, 进程是资源分配的最小单位。 进程: 当一个程序被运行, 从磁盘加载这个程序的代码至内存, 这时就开启了一个进程。 线程: 一个进程可以分为多 阅读全文
摘要:
查看cpu个数: cat /proc/cpuinfo | grep "physical id" | uniq | wc -l 查看cpu核数: cat /proc/cpuinfo | grep "cpu cores" | uniq 查看cpu型号: cat /proc/cpuinfo | grep 阅读全文
摘要:
换算 1 Byte = 8 Bits(即 1B=8b)1 KB = 1024 Bytes1 MB = 1024 KB 1 GB = 1024 MB 1 TB = 1024 GB 基本概念 Bit意为“位”或“比特”,是计算机运算的基础,属于二进制的范畴;Byte意为“字节”,是计算机文件大小的基本计 阅读全文
摘要:
在redis安装目录下执行 ./redis-server -v 版本3.2.5 下载地址 http://download.redis.io/releases/redis-3.2.5.tar.gz redis安装 tar -zxvf redis-3.2.5.tar.gz 找到redis的目录进入 cd 阅读全文