07 2022 档案
摘要:NoSQL数据库 关系型数据库与NoSQL数据库的主要区别 CAP理论和BASE原则 HBase概述 HBase与关系数据库的对比 HBase应用场景 HBase数据模型 HBase表结构 行存储和列存储的比较 HBase架构 HBase架构介绍 HFile文件格式 Region定位(1) Regi
阅读全文
摘要:数据仓库 数据仓库和数据库的区别 数据仓库的系统结构 Hive概述和体系结构 Hive简介 Hive应用场景 Hive体系结构 华为Hive架构 Hive与传统数据仓库比较(1) Hive与传统数据仓库比较(2) Hive优点 Hive缺点 Hive数据存储模型 Hive分区和分桶 Hive基本操作
阅读全文
摘要:文件系统概述 文件系统概述 HDFS架构 HDFS体系结构(1) HDFS体系结构(2) NameNode和DataNode 数据块 安全模式 文件安全性 文件权限 HDFS中的数据写入流程 HDFS中的数据读取流程 HDFS关键特性 HDFS高可用性 HDFS元数据持久化 HDFS联邦 HDFS视
阅读全文
摘要:大数据时代 ·大数据( Big Data)的定义 维基百科给出的定义︰大数据是指利用常用软件工具捕获、管理和处理数据所耗时间超过可容忍时间的数据集。 大数据研究机构Gartner给出的定义∶大数据是需要新处理模式(具有更强的决策力、洞察发现力和流程优化能力)来适应海量、高增长率和多样化的信息资产。
阅读全文
摘要:1. 参考 docker部署kafka集群 (多台服务器) 2. 安装 docker-compose 查看之前的博客进行部署(动动小手) 3. 安装 kafka-cluster 目录结构 docker-kafka-cluster ├── docker-compose .yml ├── .env └─
阅读全文
摘要:MONGDB安装与使用 安装 1 下载mongodb安装包 网址:https://www.mongodb.com/try/download/community 官网上可以下载多个系统的mongdb安装包,windows,centos,ubuntu等等,如图 MONGDB安装与使用_java 2 安装
阅读全文