大数据（笔记）

4月16日

大数据：

 大数据技术：

 

 

 

 

 

 

1，磁道寻道

2，LSM树与B-树

3，HBase写数据，

   （1）先将数据写到WAL中

    （2）WAL存放在HDFS之上AL

    （3）每次Put，Delete操作的数据均追加道WAL末端

    （4）持久化到WAL之后，在写到MemStorc中

    （5）两者写完返回ACK到客户端

 

HBASE Compaction机制

 

HBASE的参数配置

 

Rowkey:

HBase的生态：

数据分析：

时空数据库：

 

 时序数据库：

 

 （二）4月17日

1，

 

 hadoop的MR程序：

 

 

MR处理几句话中相同单词的流程：

 4月18日