摘要：
1、hive取得当前日期时间：1.1) 取得当前日期：select current_date();1.2) 取得当前日期时间：select current_timestamp();1.3) hive取得当前时间戳：select unix_timestamp();1.4) 时间戳转日期：select from_unixtime(1517725479,'yyyy-MM-dd HH:dd:ss');1.... 阅读全文
摘要：
1、触发器方式 触发器方式是普遍采取的一种增量抽取机制。该方式是根据抽取要求，在要被抽取的源表上建立插入、修改、删除3个触发器，每当源表中的数据发生变化，就被相应的触发器将变化的数据写入一个增量日志表，ETL的增量抽取则是从增量日志表中而不是直接在源表中抽取数据，同时增量日志表中抽取过的数据要及时被标记或删除。为了简单起见，增量日志表一般不存储增量数据的所有字段信息，而只是存储源表名称、更新的关键... 阅读全文
摘要：
一、数据仓库数据仓库是一个面向主题的、集成的、相对稳定的、反应历史变化的数据集合，用于支持管理决策。l 面向主题：传统的数据库是面向事务处理的，而数据仓库是面向某一领域而组织的数据集合，主题是指用户关心的某一联系紧密的集合。l 集成：数据仓库中数据来源于各个离散的业务系统数据库、外部数据、非结构化数据的集合，数据仓库数据是集成的。l 相对稳定：数据仓库中的数据不应该支持dml操作，而是通过批处理方... 阅读全文
摘要：
一、规划1、服务器：192.168.0.191 gpdb01 # master 192.168.0.192 gpdb02 # primary segment 、 mirror segment192.168.0.193 gpdb03 # primary segment 、 mirror segment192.168.0.194 gpdb04 ... 阅读全文
摘要：
1、测试数据： SQL> select * from dept; DEPTNO DNAME LOC 10 ACCOUNTING NEW YORK 20 RESEARCH DALLAS 30 SALES CHICAGO 40 OPERATIONS BOSTON SQL> select * from e 阅读全文
