摘要:
PS:本篇内容来自夏弈的个人笔记。 阅读全文
摘要:
如图,在Hue中提交Oozie周期调度时,可能会遇到提交失败,报500的错误: 解决方案: 这是时区问题,修改调度时区,和Oozie的时区保持一致,再提交就可以正常提交了。 在Hue中确认Oozie时区: 修改调度的时区: 保存,再提交就正常了。 阅读全文
摘要:
PS:本篇内容来自夏弈的个人笔记。 阅读全文
摘要:
前言: 老实说,我觉得在两个无法通信的集群中迁移数据是一件非常蠢的事情,但是既然上面这么要求了,也只能这么做了~ 正文: 为什么要强调不通信集群,因为可以互通的集群之间要进行数据转移有很多工具,只要一行命令就可以了,比如distcp。不过虽然是不通信集群,但至少也要有一台机器可以连通这两个集群作为中 阅读全文
摘要:
在网络上做一个备份: # Copyright 2015 Google Inc. All Rights Reserved. # # Licensed under the Apache License, Version 2.0 (the "License"); # you may not use thi 阅读全文
摘要:
之前写了一个程序,负责从一个集群中同步Hive数据到另一个集群中,代码中有这么一步,指定好表格后,会首先判断表格是否存在,不存在则创建,已经存在则提示是否覆盖。 在我最初编写程序的时候,两个集群中的表格基本上都是一致的,所以当初没有出什么问题。但是最近组长说这个程序干脆整合到平台里好了,所以找了一个 阅读全文
摘要:
最近经常会用到日期类型,数据库啦,SpringBoot啦之类的,现在总结一些这段时间里我对时间类型的使用经验。毕竟我也是个新人,如果哪里有错误,还希望帮忙指出,不甚感激。 ———————————————————————————————————— 时间类型,我用的最多的还是Java.util.Date 阅读全文
摘要:
唉,为什么我一个做大数据和后端的要为前端耗尽心力啊??!! 昨天在做一个网页时遇到了一个问题,有一处需要插入图片,我原本的想法是获取到上传文件的URL,然后动态插入img标签,设置src为图片的URL进而实现实时预览,结果遇到了浏览器安全防护的问题,获取到的文件路径被浏览器主动修改为了“C://fa 阅读全文
摘要:
最近在做一个小任务,将一个CDH平台中Hive的部分数据同步到另一个平台中。毕竟我也刚开始工作,在正式开始做之前,首先进行了一段时间的练习,下面的内容就是练习时写的文档中的内容。如果哪里有错误或者疏漏,希望各位网友能够指出。 第一篇:HDFS的上传与下载:https://www.cnblogs.co 阅读全文
摘要:
最近在做一个小任务,将一个CDH平台中Hive的部分数据同步到另一个平台中。毕竟我也刚开始工作,在正式开始做之前,首先进行了一段时间的练习,下面的内容就是练习时写的文档中的内容。如果哪里有错误或者疏漏,希望各位网友能够指出。 第一篇:HDFS的上传与下载:https://www.cnblogs.co 阅读全文