摘要：
06-07-使用Java操作HBase 06-08-搭建HBase的全分布和HA 搭建HBase的全分布 <property> <name>hbase.rootdir</name> <value>hdfs://192.168.16.141:9000/hbase</value> </property> 阅读全文
posted @ 2020-10-23 21:53 锦喵卫指挥使 阅读(55) 评论(0) 推荐(0) 编辑
2020年10月23日
摘要：
06-01-NoSQL数据库简介 设计一个数据库来保存电影的信息.png 06-02-Hadoop的生态圈 Hadoop的生态体系圈.png 06-03-HBase的体系架构和表结构 HBase的体系架构.png Oracle表结构和HBase的表结构.png 06-04-搭建HBase的本地模式 阅读全文
posted @ 2020-10-23 19:14 锦喵卫指挥使 阅读(55) 评论(0) 推荐(0) 编辑
摘要：
05-26-实现自连接的MapReduce程序 05-27-分析倒排索引的过程 倒排索引数据处理的过程.png 05-28-使用MapReduce实现倒排索引1 05-29-使用MapReduce实现倒排索引2 使用MapReduce实现倒排索引 import java.io.IOException 阅读全文
posted @ 2020-10-23 15:01 锦喵卫指挥使 阅读(87) 评论(0) 推荐(0) 编辑
摘要：
05-20-Shuffle的过程 shuffle.png 05-21-数据去重 职位去重.png import java.io.IOException; import org.apache.hadoop.io.LongWritable; import org.apache.hadoop.io.Nul 阅读全文
posted @ 2020-10-23 00:49 锦喵卫指挥使 阅读(67) 评论(0) 推荐(0) 编辑
2020年10月22日
摘要：
05-12-复习SQL的排序 05-13-Java对象的排序 Java对象的排序 //学生对象：按照学生的age年龄进行排序 public class Student implements Comparable<Student>{ private int stuID; private String 阅读全文
posted @ 2020-10-22 23:24 锦喵卫指挥使 阅读(43) 评论(0) 推荐(0) 编辑
2020年10月18日
摘要：
05-06-分析求每个部门的工资总额 emp.png emp.csv 7369 SMITH CLERK 7902 1980/12/17 800 0 20 7499 ALLEN SALESMAN 7698 1981/2/20 1600 300 30 7521 WARD SALESMAN 7698 19 阅读全文
posted @ 2020-10-18 14:29 锦喵卫指挥使 阅读(48) 评论(0) 推荐(0) 编辑
摘要：
04-09-HDFS数据上传的过程 HDFS数据上传的过程.png 04-10-HDFS数据下载的过程 HDFS的联盟与HA简介.png HDFS数据上传的过程.png 04-11-HDFS的安全模式 04-12-HDFS的快照 04-13-HDFS的配额 04-14-HDFS的回收站 04-15- 阅读全文
posted @ 2020-10-18 11:39 锦喵卫指挥使 阅读(97) 评论(0) 推荐(0) 编辑
摘要：
05-01-MapReduce回顾 05-02-分析WordCount数据处理的过程 分析WordCount数据处理的过程 分析WordCount数据处理的过程 Map阶段 k1,v1 代表Map的输入 k1 该行数据的偏移量，字节计算 :LongWritable v1 读入的数据 :Text k2 阅读全文
posted @ 2020-10-18 07:24 锦喵卫指挥使 阅读(71) 评论(0) 推荐(0) 编辑
摘要：
04-04-HDFS的WebConsole Web Console：端口 50070 HDFS启动的过程.png 1、安全模式 safe mode 注意：HDFS正常运行的时候，安全模式一定是off（关闭状态） 是HDFS的一种自我保护，作用：检查数据块的副本率 HDFS处于安全模式，是只读的状态 阅读全文
posted @ 2020-10-18 05:29 锦喵卫指挥使 阅读(108) 评论(0) 推荐(0) 编辑
2020年10月17日
摘要：
04-01-HDFS之NameNode的职责.mp4 1）是HDFS的主节点、管理员。职责：接收客户端（命令行、Java程序）的请求：创建目录、上传数据、下载数据、删除数据等等 2）管理和维护HDFS的日志和元信息 * 日志文件（edits文件）：记录的是客户端的所有操作，同时体现了HDFS的最新的 阅读全文
posted @ 2020-10-17 12:45 锦喵卫指挥使 阅读(105) 评论(0) 推荐(0) 编辑