09 2022 档案

分区数量与reduce个数怎样才能不报错
摘要：reduce数量只能是1个或者比分区的数量多，否则数据写入会出现问题报错。 因为系统有自带的方法，也可以自定义，如果自定义就跑自定义的方法，是1就用系统默认的。 大于的时候会产生多个空的输出文件。（浪费内存和空间） 分区的数量应该连续。 阅读全文
posted @ 2022-09-25 10:42 吕洞玄 阅读(18) 评论(0) 推荐(0) 编辑
hiveserver2连接报错：“User: xxx is not allowed to impersonate yyy (state=08S01,code=0)”
摘要：在hadoop的配置文件core-site.xml中添加或者修改如下配置信息 hadoop.proxyuser.xxx.hosts * hadoop.proxyuser.xxx.groups * 其中的xxx为你的用户名。 重启一下就可以了。 阅读全文
posted @ 2022-09-19 20:23 吕洞玄 阅读(24) 评论(0) 推荐(0) 编辑
Zookeeper应用场景
摘要：1.统一命名服务 2.统一配置管理 3.软负载均衡 阅读全文
posted @ 2022-09-18 09:49 吕洞玄 阅读(15) 评论(0) 推荐(0) 编辑
为啥hadoop建议安装奇数台虚拟机？
摘要：因为zookeeper只有半数以上的主机存活的时候他才能够正常运行。 奇数台效率更高。 阅读全文
posted @ 2022-09-18 09:44 吕洞玄 阅读(14) 评论(0) 推荐(0) 编辑
ssm框架搭建流程
摘要：在网上找了很多，自己总结一下，理清思路以后这种模式化的东西就简单多了。 首先就是创建一个maven app项目，放入tomcat。这个很简单就不再赘述了。 然后就是在pom.xml中导入依赖。 ` <project.build.sourceEncoding>UTF-8</project.build. 阅读全文
posted @ 2022-09-05 21:43 吕洞玄 阅读(71) 评论(0) 推荐(0) 编辑
关于写博客没有记录问题
摘要：上个学期基本每天都有写博客，共写了102篇，但是老师那边有显示的只有25篇，这让我很不能理解，也可能因为这个我才得了很低的分数。 思来想去还是觉得是我编辑的主题问题，当时为了好看改了好多设置，尤其是页首和页尾。一失足成千古恨..... 下学期目标是300篇！加油！希望能得到80+！ 阅读全文
posted @ 2022-09-05 10:36 吕洞玄 阅读(9) 评论(0) 推荐(0) 编辑