摘要:
启动 be的时候出现job aborted; 查看日志 be.WARNNING,发现有下面的bug, W0708 01:33:16.123397 9919 cidr.cpp:75] wrong CIDR IP value. network= F0708 01:33:16.123462 9919 ba 阅读全文
摘要:
Docker-compose部署kafka 1. 配置docker-compose.yml version: '3' services: zookeeper: image: wurstmeister/zookeeper ports: - "2181:2181" kafka: image: wurst 阅读全文
摘要:
Ubuntu下使用国内源安装Docker 1. 卸载已经存在的docker sudo apt remove docker-desktop 2. 清理残余文件 rm -r $HOME/.docker/desktop sudo rm /usr/local/bin/com.docker.cli sudo 阅读全文
摘要:
BUG如下: PS D:\Projects\flink_bytedance\word-count-master> go get github.com/segmentio/kafka-go go: github.com/Shopify/sarama@v1.35.0: Get "https://prox 阅读全文
摘要:
kafka单机环境搭建及其基本使用 1. 环境搭建 1.1 解压下载的kafka压缩包 [root@sam01 sam]# tar -zxvf kafka_2.11-0.11.0.0.tgz -C /usr/local 1.2 将解压到的kafka文件夹进行改名 [root@sam01 sam]#m 阅读全文
摘要:
1. 问题描述 1.1 在Linux安装完mysql后,尝试用命令systemctl start mysqld出现错误,Job for mysqld.service failed because the control process exited with error code. See "sys 阅读全文
摘要:
启动Hive之前要先启动hdfs与yarn 阅读全文
摘要:
1. 环境:mysql 8.0.28、mysql驱动5.1.17 2. BUG描述:使用spark连接mysql出现错误 2.1 spark连接mysql语句 //TODO 创建SparkSQL的运行环境 val sparkConf = new SparkConf().setMaster("loca 阅读全文
摘要:
1. 环境:maven 3.6.3、spark-core_2.12-3.2.1、Java1.8 2. 问题描述 2.1 设置了log4j.properties,目的是将只将运行结果和ERROR的信息打印在控制台,但不起作用 2.2 log4j.properties log4j.rootCategor 阅读全文
摘要:
出现以下错误提示 Exception in thread "main" java.io.NotSerializableException: com.sam.bigdata.spark.core.test.Task at java.io.ObjectOutputStream.writeObject0( 阅读全文