摘要: 1、debian 系统 1.1、安装 meld sudo apt-get install meld 1.2、创建 git_meld.sh 脚本 vim /bin/git-meld.sh #!/bin/sh meld $2 $5 1.3、修改 git_meld.sh文件的权限 chmod +x /bi 阅读全文
posted @ 2021-12-17 12:20 zhengsongsong 阅读(387) 评论(0) 推荐(0) 编辑
摘要: 在本教程中,我们将向您展示如何在MySQL Apt Repository的Debian 9机器上安装和保护MySQL。 如果您的应用程序没有任何特定要求,您应该坚持使用Debian 9中的默认数据库系统MariaDB。 配置MySQL的软件仓库 要将MySQL APT存储库添加到系统,请转到存储库下 阅读全文
posted @ 2021-12-13 13:41 zhengsongsong 阅读(509) 评论(0) 推荐(0) 编辑
摘要: 1、查看虚拟机的ip地址 2、本地ping,看能否ping通 3、如果ping不通,选择"编辑"里的"虚拟网络编辑器",保证子网ip一致 4、同时本地进行ipconfig,保证VMnet8 与上面ip一致 5、如果不一致,需要进行win设置 至此,基本完成设置,可以连接成功!!! 阅读全文
posted @ 2021-12-12 20:08 zhengsongsong 阅读(1237) 评论(0) 推荐(0) 编辑
摘要: 1、下载Universal USB Installer 2、插入要刻录的U盘。 3、运行Universal USB Installer。这是一个绿色软件,无需安装。 4、Universal USB Installer的第一个窗口是版权许可协议,点击"I Agree"按钮就可以了。 5、Install 阅读全文
posted @ 2021-12-09 20:38 zhengsongsong 阅读(2392) 评论(0) 推荐(2) 编辑
摘要: 问题显示: 由于一次执行较多的任务,导致azkaban的web程序崩溃,此时,关闭azkaban服务,重新启动azkaban 但是由于azkaban的exec程序无法关闭,这里采用kill的方式关掉exec进程 # azkaban 开启: cd /opt/azkaban/exec sh ./bin/ 阅读全文
posted @ 2021-12-03 09:58 zhengsongsong 阅读(1472) 评论(0) 推荐(0) 编辑
摘要: 注意: 断一天 也算连续登陆 1、创建建表语句 create table demo( id string, dt string ) row format delimited fields terminated by '\t'; 2、数据准备 1001 2021-08-01 1001 2021-08- 阅读全文
posted @ 2021-12-02 23:25 zhengsongsong 阅读(451) 评论(0) 推荐(0) 编辑
摘要: 方案一: 如果是集成CDH环境,首先检查/etc/hive/conf目录下是不是有atlas-application.properties文件,如果没有,从atlas路径下copy一份过去 方案二: 如果确认文件已经有了,导入还是报错,强行修改import-hive.sh文件,指定HIVE_CP=/ 阅读全文
posted @ 2021-05-17 10:07 zhengsongsong 阅读(344) 评论(0) 推荐(0) 编辑
摘要: 问题描述: sparksql 本地idea测试运行时,没有lzo依赖,也找不到相应的pom依赖 报错日志: Caused by: java.lang.IllegalArgumentException: Compression codec com.hadoop.compression.lzo.LzoC 阅读全文
posted @ 2021-04-27 18:54 zhengsongsong 阅读(566) 评论(0) 推荐(0) 编辑
摘要: 问题描述: datax往hdfs写数据如何配置高可用 问题解析: datax官网有相关配置,但是太过于笼统不够详细 解决方案:(nameservice1) "defaultFS":"hdfs://nameservice1","hadoopConfig":{ "dfs.nameservices": " 阅读全文
posted @ 2021-04-27 15:34 zhengsongsong 阅读(2259) 评论(0) 推荐(1) 编辑
摘要: 问题描述: 当cdh集群配置高可用后,hdfs 的 active 节点转 standby 后,hive数据无法读取 FAILED: SemanticException Unable to determine if hdfs://hadoop-prod-namenode:8020/user/hive/ 阅读全文
posted @ 2021-04-27 14:58 zhengsongsong 阅读(982) 评论(0) 推荐(0) 编辑