摘要:
一、HDFS Trash垃圾桶 1.文件系统垃圾桶背景 HDFS本身也是一个文件系统,那么就会涉及到文件数据的删除操作。 默认情况下,HDFS中是没有回收站垃圾桶概念的,删除操作的数据将会被直接删除,没有后悔药。 2.功能概述 1.HDFS Trash机制,叫做回收站或者垃圾桶。Trash就像Win 阅读全文
摘要:
1.背景 HDFS并不擅长存储小文件,因为每个文件最少一个block,每个block的元数据都会在NameNode占用内存,如果存在大量的小文件,它们会吃掉NameNode节点的大量内存。如下所示,模拟小文件场景: 2.Archive概述 Hadoop Archives可以有效的处理以上问题,它可以 阅读全文
摘要:
一、什么是元数据 在HDFS中,元数据主要指的是文件相关的元数据,由NameNode管理维护。从广义的角度来说,因为NameNode还需要管理众多DataNode节点,因此DataNode的位置和健康状态信息也属于元数据。 二、元数据管理概述 1.文件相关元数据类型 在HDFS中,文件相关元数据具有 阅读全文
摘要:
一、配置文件 1.初始化数据库 wget https://raw.githubusercontent.com/alibaba/nacos/develop/distribution/conf/mysql-schema.sql mysql -uroot -p CREATE DATABASE IF NOT 阅读全文