06 2019 档案
摘要:1 安装pip 2 更新pip 3 安装各种开发库 4 安装Airflow export SLUGIFY_USES_TEXT_UNIDECODE=yes pip install apache-airflow 遇到第一个问题 ERROR: Cannot uninstall 'enum34'. It i
阅读全文
摘要:高频快捷键 查找类快捷键 command + F12 查看当前类方法变量 command + E 查看最近文件 Alt+F1 查找各种导航栏 command + N 搜索类(类名) command + shift + N 只搜索文件 双击shift 搜索所有文件(文件名) command + shi
阅读全文
摘要:1 举例子,建数据库,然后 赋予用户远程访问的所有权限,最后刷新权限
阅读全文
摘要:1 hue error日志报错,找不到hue数据库 2 解决办法 删除hue服务,重新添加,再次在添加database阶段验证密码,test通过,再继续。 还有造成这个事情的原因,是自己移动了mysql的文件,虽然重新软连接了过去,没有重启,导致进去数据库之后,所有的数据库都是没有找到的状态。
阅读全文
摘要:1 示范 运行的jar包和传参放在最后,就可以了 运行的jar包和传参放在最后,就可以了
阅读全文
摘要:1 代码示范 2 填写参数 3 输出效果 4 没有填写参数,打印提示信息
阅读全文
摘要:1 脚本编写 2 解释 $n 表示是第几个参数 $0 表示脚本命令本身 3 执行效果
阅读全文
摘要:问题:HUE依赖Oozie 所以Oozie不能够卸载,好坑啊 解决思路; 重新装回来,但是不启动Oozie,节约一部分性能。
阅读全文
摘要:1 详细异常 2 查询Stack Overflow里面问答 https://stackoverflow.com/questions/54036028/spark-executor-heartbeat-timed-out-after-x-ms 3 解决 提交spark submit任务的时候,加大超时
阅读全文
摘要:查看日志:yarn logs -applicationId application_xxx 导入到外部文件 yarn logs -applicationId application_xxx >> temp.log 然后自己就可以用tail或者grep去查看日志了。
阅读全文
摘要:1 异常信息 2 因为自己的/etc/profile有不存在的配置,注释掉即可
阅读全文
摘要:1 Phoenix远程无法连接但是本地可以连接,详细异常 2 仔细观察异常信息,发现连接是localhost信息,如果是本机访问当然没有问题,但是远程访问肯定就有问题,知道问题所在,开始排查 3 语网友说是要设置dns,感觉太复杂了, https://blog.51cto.com/yaoyinjie
阅读全文
摘要:1 异常信息 2 原因以及解决思路 <!--?xml version="1.0" encoding="UTF-8"?--> core-site.xml 与 hdfs-site.xml中的hdfs存储路径设置不一致,修改成一致的即可解决问题
阅读全文
摘要:1 详细异常信息 2 原因 自己之前的hbase存储的文件路径是本地文件系统,修改为HDFS路径后,Phoenix找不到系统表 3 解决办法 a 先删除Zookeeper里面的hbase信息 b 重启hbase,重新初始化 c 重新启动Phoenix解决问题 如果是生产环境,不能够重新初始化hbas
阅读全文