11 2018 档案

AWS Redshift 导出数据进入 S3

摘要：AWS Redshift 支持一个命令 Unload, 可以快速的导出数据进入 AWS S3 UNLOAD ('select * from apfdb.common.t_rep_fr_r_loc_sku_dy_act_confirmed WHERE LOC_CNTRY_CDE=''03'' and 阅读全文

posted @ 2018-11-21 20:26 爱知菜阅读(44) 评论(0) 推荐(0) 编辑

Oracle 和 AWS Redshift 获取数据库所有表名和列名的

摘要：Oracle 表名区分大小写。 select table_name from user_tables where table_name like '%xxxxx%'; select OWNER, TABLE_NAME, COLUMN_NAME from all_tab_columns where C 阅读全文

posted @ 2018-11-19 11:20 爱知菜阅读(24) 评论(0) 推荐(0) 编辑

Kettle Number & BigNumber Format

摘要：在Spoon的文件栏, Edit->Edit Kettle Properties files 将 KETTLE_DEFAULT_BIGNUMBER_FORMAT 项配置为0.##### 否则的话, 默认Kettle对它认为是BigNumber的列 ,把0 会强行写成0.0, 造成不必要的冗余阅读全文

posted @ 2018-11-05 19:13 爱知菜阅读(148) 评论(0) 推荐(0) 编辑

CDH 大数据疑难解决一则

摘要：起因: Hive查询变慢观察: Cloudera Manager中某个Datanode报错, Health Chart每隔几分钟有红色不健康状态观察日志: 在 /data/log/hadoop-hdfs/hadoop-cmf-hdfs-DATANODE-dw-slave01-te.uniqlo- 阅读全文

posted @ 2018-11-02 17:44 爱知菜阅读(56) 评论(0) 推荐(0) 编辑