摘要:
# 1. 源码编译 ## 1.1 为什么要编译? **(1)Native Library 本地库** Native Library,一般译为本地库或原生库,是由 C/C++ 编写的动态库(*.so),并通过 JNI 机制为 Java 层提供接口。应用一般会出于性能、安全等角度考虑将相关逻辑用 C/C 阅读全文
摘要:
# 1. HDFS Trash ## 1.1 功能概述 **回收站(垃圾桶)**是当前主流操作系统里的一个系统文件夹,主要用来存放用户临时删除的文档资料,存放在回收站的文件可以恢复。 回收站的功能给了我们一剂“后悔药”。回收站保存了删除的文件、文件夹、图片、快捷方式等。这些项目将一直保留在回收站中, 阅读全文
摘要:
# 1. HDFS 数据迁移解决方案 数据迁移指的是一种大规模量级的数据转移,转移的过程中往往会跨机房、跨集群 ,数据迁移规模的不同会导致整个数据迁移的周期也不尽相同 。 在 HDFS 中,同样有许多需要数据迁移的场景,比如冷热数据集群之间的数据转化, 或者 HDFS 数据的双机房备份等等。因为涉及 阅读全文
摘要:
# 1. 存储格式 ## 1.1 前置说明 Hadoop 上的文件存储格式,肯定不会像 Windows 这么丰富,因为目前我们用 Hadoop 来存储、处理数据。我们不会用 Hadoop 来听歌、看电影或者打游戏。 在 Hadoop 中,没有默认的文件格式,格式的选择取决于其用途。而选择一种优秀、适 阅读全文
摘要:
# 1. HDFS Shell CLI https://hadoop.apache.org/docs/r3.1.3/hadoop-project-dist/hadoop-common/FileSystemShell.html ## 1.1 基本概念 命令行界面(英语:command-line int 阅读全文