BIG_BOSS_ZC - 博客园

2019年10月11日

摘要：创建表 hbase(main):006:0> create 'goods_zc','type' 0 row(s) in 1.3090 seconds => Hbase::Table - goods_zc 删除表 hbase(main):008:0> disable 'goods_zc' 0 row( 阅读全文

posted @ 2019-10-11 18:39 BIG_BOSS_ZC 阅读(108) 评论(0) 推荐(0)

【HBase】知识小结+HMaster选举、故障恢复、读写流程

摘要： 1：什么是HBase HBase是一个高可靠性，高性能，面向列，可伸缩的分布式数据库，提供海量数据存储功能，一个结构化的分布式存储系统，不同于一般的关系型数据库，它适合半结构化和非结构化数据存储。 2：HBase表的特点大：一个表中可以有数十亿行，上百万列无模式：每行都有一个可排序的主键和任意多阅读全文

posted @ 2019-10-11 17:06 BIG_BOSS_ZC 阅读(1629) 评论(0) 推荐(0)

【HBase】HBase架构中各种组件的作用

摘要： client: 发起读写请求维护cache,加快读取速度 zookeeper: HMaster选举，存储meta-region的路由信息，监控集群从节点HRegionSever上信息 HMaster：分配region，RegionServer管理，RegionServer的注册，负载均衡，故障切阅读全文

posted @ 2019-10-11 15:13 BIG_BOSS_ZC 阅读(684) 评论(0) 推荐(0)

【HBase】与关系型数据库区别、行式/列式存储

摘要：【HBase】与关系型数据库区别 1.本质区别 mysql:关系型数据库，行式存储，ACID，SQL，只能存储结构化数据事务的原子性(Atomicity)：是指一个事务要么全部执行，要么不执行，也就是说一个事务不可能只执行了一半就停止了。比如你从取款机取钱，这个事务可以分成两个步骤：1划卡，2出钱阅读全文

posted @ 2019-10-11 10:34 BIG_BOSS_ZC 阅读(889) 评论(0) 推荐(0)

2019年10月10日

【HBase】HBase架构图

摘要：阅读全文

posted @ 2019-10-10 18:51 BIG_BOSS_ZC 阅读(136) 评论(0) 推荐(0)

【Checkpoint】HA模式下结合zookeeper说一下checkpoint流程

摘要： checkpoint过程配置了HA的HDFS中，有active和standby namenode两个namenode节点。他们的内存中保存了一样的集群元数据信息，这个后续我会详细用一篇文章介绍HA，所以这里就不多说了。因为standby namenode已经将集群状态存储在内存中了，所以创建检查点阅读全文

posted @ 2019-10-10 16:41 BIG_BOSS_ZC 阅读(308) 评论(0) 推荐(0)

【HBase】安装与使用

摘要：下载HBase(注意下载与您使用的hadoop版本兼容的版本) 前提：hadoop HA,zookeeper是正常的。 1.解压 tar -zxvf hbase压缩包 -C 解压后存储路径 2.配置环境变量 vi /etc/profile export HBASE_HOME=/usr/local/h 阅读全文

posted @ 2019-10-10 16:13 BIG_BOSS_ZC 阅读(192) 评论(0) 推荐(0)

【zookeeper】安装教程文档需下载

摘要：请查看文件https://download.csdn.net/download/qq_42158942/11846847 zookeeper的作用 • ZooKeeper 是一个开源的分布式协调服务，由雅虎创建，是 Google Chubby 的开源实现。 • 分布式应用程序可以基于 ZooKeep 阅读全文

posted @ 2019-10-10 16:02 BIG_BOSS_ZC 阅读(101) 评论(0) 推荐(0)

2019年10月8日

【数据分析项目】流程展示（爬虫+数据清洗+数据分析+后台前端）

摘要： 1.数据来源网站：51job 爬虫：java程序，使用jsoup解析网页数据量：80w+ 2.数据清洗 mapreduce 3.数据分析hive 4.数据展示【springboot+mybatis+前端echarts图表+ajax异步请求】演示视频：阅读全文

posted @ 2019-10-08 08:49 BIG_BOSS_ZC 阅读(554) 评论(0) 推荐(0)

2019年9月18日

【HIVE】（3）联合查询join、时间戳函数、字符串函数

摘要：数据 t_join1.txt 1,a,1 2,b,2 3,c,4 t_join2.txt 1,2a 2,2b 3,2c 建表、导入： create table t_join1(id int, name string, cid int) row format delimited fields term 阅读全文

posted @ 2019-09-18 16:25 BIG_BOSS_ZC 阅读(317) 评论(0) 推荐(0)

BIG*BOSS

公告