随笔分类 - hadoop
摘要：解决“HA机制hadoop集群中job提交之后提示Faling the application，但是不抱任何错，程序甚至没有执行，但是在log中有报错org.apache.hadoop.mapreduce.v2.app.client.MRClientService: Webapps failed t
阅读全文
摘要：kafka 3.1.0版本创建topic命令报错 //20220316 写在前面：今天学习kafka的时候，使用kafka-topics.sh命令创建topic时，报错了，遂在网上寻找解决方案，在此记录一下 出现问题： 使用kafka-topics.sh命令创建topic时，报出如下错误 出现问题原
阅读全文
摘要：Storm提交topology小记 //20220314 写在前面：今天学习storm的时候，把写完的storm代码打包成jar上传到storm集群中运行，出现了一系列问题，在此记录一下 出现的问题： 报 Detected both log4j-over-slf4j.jar AND bound sl
阅读全文
摘要：storm ui启动时报错：地址已使用 //20220303 写在前面：今天搭建storm时候，启动storm ui时候报了个错，说地址已使用，遂在此记录下解决方法 参考博客链接 storm ui报错 问题产生原因：8080端口被占用（虽然我netstat ntlp命令并为找到占用8080的程序）
阅读全文
摘要：junit Maven依赖添加进pom文件之后还是无法加载@Test //20220302 写在前面：今天写HBase客户端的时候，在新系统上创建的相关Maven项目，然后导入junit包，导入之后发现还是无法使用@Test测试模块，遂在此记录下解决方法 引入junit Maven依赖代码： <!-
阅读全文
摘要：idea Maven项目添加依赖 //20220302 写在前面：创建idea Maven项目总是忘记如何添加依赖，直接从Maven仓库copy依赖到pom文件不行，遂在此记录 如何添加依赖 依赖需要写入的文件：pom.xml Maven仓库网站copy出来的依赖是这样子的 <!-- https:/
阅读全文
摘要：HBase 外部访问网页端口 //20220301 写在前面：记录HBase初始端口变化 问题：看视屏教程，HBase 0.X.X外部访问网页端口为60010，尝试之后发现访问不上 解决：jps查看进程，记下HMaster PID，如图 使用netstat -ntlp查看端口占用，找到对应PID，发
阅读全文
摘要：//20220110 本篇用于记录hadoop2.3.9解压之后无法启动 & 启动之后无法建表的问题 问题描述 问题1 在官网下载hive之后，拷贝到本地，解压，进入bin目录用hive启动，此时报出如下错误 出现原因：hadoop和hive 对应的guava文件版本不一致，hadoop guava
阅读全文
