03 2021 档案
摘要：//20210326 写在前面：今天学习hadoop“使用java调用api操作hadoop集群”阶段，在linux上运行代码很顺畅，maven和jar包一加，就运行成功了，但是迁移到windows上面就一堆问题（因为生产环境服务器肯定没有可视化界面，都是要本地jar包上传的），经过查阅资料，多次尝
阅读全文
摘要：//20210309 写在前面：安装好hadoop之后，试着运行mapreduce内置的pi程序，发现报错，在此记录一下排除并修复bug的过程 正文 问题起因：mapreduce运行内置pi程序的时候报出如下错误： 一开始我以为是需要科xue上网，科xue上网之后问题并没有解决，然后我意识到一个问题
阅读全文
摘要：//20210305 写在前面：今天配置好了伪分布式hadoop，启动之后发现jps无相关进程，遂在网上查找资料，无果，后来查看logs日志文件，发现报错，再次查找资料，发现是主机名问题，更改再次启动，成功！在此记录一下 问题描述 Hadoop安装配置好之后启动start-dfs.sh打印出启动信息
阅读全文
摘要：//20210304 写在前面：今天学Hadoop安装配置（伪分布式），改完配置文件启动start-def.sh的时候，报了Permission denied（publickey,gssapi-keyex,gssapi-with-mic,password）错误，在网上查找资料，确定问题出在公钥上，遂
阅读全文
摘要：//20210303 写在前面：学大数据的时候需要更改主机名字，按照教程上面吧etc/sysconfig下的network中的HOSTNAME更改之后重启系统（或者注销重新登录）之后并无变动，遂百度，最后得知Centos 7比以往的系统变动较大，更改对应文件之后，成功变动主机名，在此记录一下 正文
阅读全文
