摘要: 因为各种三方库依赖的log4j实现不同,所以可能会出现找到多个log4j实现的警告,但是不影响程序(logback是会影响的),如下: SLF4J: Class path contains multiple SLF4J bindings. SLF4J: Found binding in [jar:f 阅读全文
posted @ 2020-10-18 15:57 車輪の唄 阅读(50) 评论(0) 推荐(0) 编辑
摘要: 1.HDFS写流程: 客户端要向HDFS写数据,首先要跟namenode通信以确认可以写文件并获得接收文件block的datanode,然后,客户端按顺序将文件逐个block传递给相应datanode,并由接收到block的datanode负责向其他datanode复制block的副本 如图: 写详 阅读全文
posted @ 2020-10-18 13:00 車輪の唄 阅读(16) 评论(0) 推荐(0) 编辑
摘要: 首先抛出的异常如下: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.protocol.AlreadyBeingCreatedException): Failed to APPEND_FILE /binlogsync_test 阅读全文
posted @ 2020-10-18 12:58 車輪の唄 阅读(93) 评论(0) 推荐(0) 编辑