摘要:
MapReduce入门学习,包括其分治的思想,框架本身的设计思想,以及其优劣势。欢迎朋友们一起探讨👏 阅读全文
摘要:
你的 Java 代码有没有捕获空指针错误?equals 方法和 == 的使用有没有区分开?IDEA 里面有没有很多下划线或颜色不一样的警告⚠️ 快来看看,你的代码里有没有这些坏味道 :-) 阅读全文
摘要:
HDFS 的联邦机制解决了 NameNode 的横向扩容问题,具体原理是什么样的呢?一起学习下🤝 阅读全文
摘要:
通过 Xshell、SecureCRT 等工具登录 Linux 操作系统(尤其是重装的系统)之后,经常出现会话超时,导致自动断开会话的现象,要怎么解决呢? 阅读全文
摘要:
Maven 构建的 Java 项目,依赖了仓库外部的 jar 包,在编译、打包时如何把这些 jar 包引入依赖呢? 阅读全文
摘要:
本文演示了在 Linux 和 Windows 两种平台上,为文件生成 MD5,SHA1,SHA256 等校验码的方法,这可以用来检查文件是否被篡改,或着下载是否出错等问题。 阅读全文
摘要:
HDFS 的 NameNode 是如何实现高可用的?JournalNode 承担着什么角色?Qurom Journal Manager 的工作原理是什么?本篇文章做个探讨,欢迎留言交流👏 阅读全文
摘要:
Linux 服务器中经常收到新邮件,是不是很烦人?怎么关闭邮件提示呢?来试试这招吧 : -) 阅读全文
摘要:
介绍常见的六种容错机制:Fail-Over、Fail-Fast、Fail-Back、Fail-Safe,Forking 和 Broadcast 阅读全文
摘要:
HDFS 如何创建存档文件?怎么查看、解除存档文件?这篇文章做个介绍。 阅读全文
摘要:
macOS 系统编译 Hadoop 3.2.1,要安装一些特殊的软件,还要需改源码的一些编译配置文件。
踩了很多坑,不过最终编译成功了。贴出来给有需要的朋友们提供参考✌️ 阅读全文
摘要:
运行 HDFS 命令,总是出现恼人的 “WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable”?
来看看本文吧,本强迫症尝试了各种方法,彻底解决 macOS 上运行 Hadoop 程序总是出现上面警告的问题⚠️ 阅读全文
摘要:
HDFS 集群的性能瓶颈中,常常会听到“小文件太多”类似的描述。
为什么太多的小文件会影响 HDFS 的性能呢?解决方案之【合并小文件】也一起来学学吧💪 阅读全文
摘要:
通过 HDFS 的 Java API,读写 HDFS 中的文件,包括创建目录、写文件、上传下载文件,遍历文件,访问权限控制等等。 阅读全文
摘要:
Windows 的 IDEA 中运行 Hadoop 或 Spark 程序总是报错:Could not locate executable null\bin\winutils.exe in the Hadoop binaries. 要怎么解决呢? 阅读全文