摘要： 适用范围 案例 备注 小记 hadoop fs 使用范围最广，对象：可任何对象 hadoop dfs 只HDFS文件系统相关 hdfs fs 只HDFS文件系统相关（包括与Local FS间的操作），已经Deprecated hdfs dfs 只HDFS文件系统相关，常用 tackoverflow的 阅读全文

摘要： 一、区别 1.去什么? truncate table 和 delete只删除数据(记录)不删除表的结构;drop语句将删除表的数据(记录)和表结构依赖的约束(constrain)，触发器(trigger),索引(index),保留依赖于该表的存储过程/函数，但是变为invalid状态 . 譬如:de 阅读全文

摘要： 数据倾斜介绍 在做Shuffle阶段的优化过程中，遇到了数据倾斜的问题，造成了对一些情况下优化效果不明显。主要是因为在Job完成后的所得到的Counters是整个Job的总和，优化是基于这些Counters得出的平均值，而由于数据倾斜的原因造成map处理数据量的差异过大，使得这些平均值能代表的价值降 阅读全文

摘要： 在 navicat 中有三种注释的书写方式： 以 # 开头的字符串，可以多个 # 连续以 – 开头的字符串，注意：只能是 – ，而且 – 后面需要加一个半角空格以 /* */ 包围的字符串，类似于 Java 中的注释，但是 // 开头是不允许的示例： SELECT * from s_user; # 阅读全文