01 2018 档案
摘要：修改 core-site.xml文件 vim /usr/local/hadoop/etc/hadoop/core-site.xml 增加： 关闭文件权限检查： hdfs-site.xml 关闭safemod: hdfs dfsadmin -safemode leave 使用beeline登录测试：
阅读全文
摘要：https://www.cnblogs.com/wujin/p/6051768.html
阅读全文
摘要：前端js代码： 后端Java代码：
阅读全文
摘要：Hive删除分区语句： alter table table_name drop if exists partition(dt=30301111)
阅读全文
摘要：如果想把 20180123 转换成 2018-01-23，可以使用： select from_unixtime(unix_timestamp('${p_date}','yyyymmdd'),'yyyy-mm-dd') from dual limit 1; http://blog.csdn.net/l
阅读全文
摘要：hive不支持group by 别名，如果需要group by 别名的情况，可以使用 别名的 值作为group by 的值
阅读全文
摘要：http://blog.csdn.net/bitcarmanlee/article/details/51013474 根据自己的理解与实际项目经验，说说ODS与EDW的异同。如果有不对的地方，欢迎大家批评指正。 维基百科对于ODS的定义为”An operational data store (or
阅读全文
摘要：http://blog.csdn.net/yimingsilence/article/details/70057638 数据类型转换 同Java语言一样，Hive也包括 隐式转换（implicit conversions）和显式转换（explicitly conversions）。 Hive在需要的
阅读全文
摘要：不要这样写： log.error(e);这样只是简单的记录下错误的类型，不能精确出错误出错在哪行 要写成：log.error(e.toString(),e);
阅读全文
摘要：http://healthandbeauty.iteye.com/blog/1618501 在持续集成服务器上使用怎样的 mvn 命令集成项目，这个问题乍一看答案很显然，不就是 mvn clean install 么？事实上比较好的集成命令会稍微复杂些，下面是一些总结： 不要忘了clean： cle
阅读全文
摘要：大概是这种问题 running build running build_py running build_ext building'M2Crypto.__m2crypto' extension swigging SWIG/_m2crypto.i to SWIG/_m2crypto_wrap.c sw
阅读全文
摘要：http://blog.csdn.net/isea533/article/details/50281151 http://blog.csdn.net/lifuxiangcaohui/article/details/47173597 https://www.cnblogs.com/magicalSam
阅读全文
摘要：使用 ProcessBuilder
阅读全文
摘要：brew install pstree
阅读全文
摘要：查看状态 hdfs haadmin -getServiceState nn1 有时候通过网页访问两个namenode的http-address，看到默认的主namenode状态变成了standy，这时可以通过下面命令来实现主namenode的状态切换成active。 hdfs haadmin -fa
阅读全文
摘要：解决方法：在hive-site.xml中添加 <property> <name>system:java.io.tmpdir</name> <value>/home/root/hdp/tmpdir</value> </property> <property> <name>system:user.nam
阅读全文
摘要：查看 临时关闭 永久关闭 将SELINUX=enforcing改为SELINUX=disabled 设置后需要重启才能生效
阅读全文
摘要：官方的spring-hadoop-samples的demo 写的还是挺好的，值得学习。 官网地址： http://projects.spring.io/spring-hadoop/#quick-start demo地址： https://github.com/spring-projects/spri
阅读全文
摘要：http://blog.csdn.net/zhoujinyu0713/article/details/46843115 spring-boot-devtools 是一个为开发者服务的一个模块，其中最重要的功能就是自动应用代码更改到最新的App上面去。相关Blog: 点击打开链接 原理是在发现代码有更
阅读全文
摘要：使用Spring boot整合Hive，在启动Spring boot项目时，报出异常： java.lang.NoSuchMethodError: org.eclipse.jetty.servlet.ServletMapping.setDefault(Z)V 经过排查，是maven的包冲突引起的，具体
阅读全文
摘要：mybatis-generator官网： http://www.mybatis.org/generator/running/runningWithMaven.html 在pom.xml中的 build下添加： 在Maven Projects里面可以看到插件已经被集成， 在resources目录下会自
阅读全文
摘要：/** * 拆分集合 * @param <T> * @param resList 要拆分的集合 * @param count 每个集合的元素个数 * @return 返回拆分后的各个集合 */public static <T> List<List<T>> splitList(List<T> resL
阅读全文
摘要：作者：八面山人链接：https://www.zhihu.com/question/39483566/answer/246333825来源：知乎著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。 做微服务快3年了，目前用的是spring boot，spring cloud 全家桶。
阅读全文
摘要：http://blog.csdn.net/zlm838687/article/details/74781522 hdata datax交流总结 今天和阿里云的同学就数据同步做了简要的交流，下面就交流的内容做一个总结 分片相关 流控 开发平台相关 总结 我们做的好的地方 值的学习借鉴的地方
阅读全文
