摘要:
最近刚刚过完生日,又大了一岁,距离 40 岁又进了一步。 年纪大了,就要多复盘。最近几天思考的比较多,因为身边失业的朋友开始多了起来。 我又有点陷入担忧、焦虑的心态了。 好在我一直是个有阿 Q 精神的中年油腻男,很快安抚好自己的心情。 但是对互联网职场人来说,40 岁真的是很难很难绕过去的坎。 这个 阅读全文
2020年4月29日 #
2020年4月27日 #
摘要:
DFSZKFailoverController 控制故障转移定期对本地的NameNode发起health-check的命令,如果NameNode正确返回,那么这个NameNode被认为是OK的。否则被认为是失效节点。ZK提供了一个简单的机制来保证只有一个NameNode是活动的。如果当前的活动Nam 阅读全文
摘要:
1.文档编写目的 本文主要介绍由Cloudera Manager管理的CDH集群的角色划分。实际部署你可能还需要考虑工作负载的类型和数量,真实要部署的哪些服务,硬件资源,配置,以及其他因素。当你使用Cloudera Manager的安装向导来安装CDH时,CM会根据主机的可用资源,自动的分配角色到各 阅读全文
2020年4月23日 #
摘要:
https://cloud.tencent.com/document/product/589/12290 阅读全文
2020年4月21日 #
摘要:
https://www.cnblogs.com/zlslch/category/1008268.html 阅读全文
摘要:
NameNode之间共享数据(NFS 、Quorum Journal Node(用得多)) 两个NameNode为了数据同步,会通过一组称作JournalNodes的独立进程进行相互通信。当active状态的NameNode的命名空间有任何修改时,会告知大部分的JournalNodes进程。stan 阅读全文
摘要:
1、概述 Yarn是一个资源调度平台,负责为运算程序提供服务器运算资源,相当于一个分布式的操作系统平台,而MapReduce等运算程序则相当于运行于操作系统之上的应用程序。 Yarn的架构如下图所示: 从Yarn的架构图来看,他主要由ResourceManager、NodeManager、Appli 阅读全文
2020年4月17日 #
摘要:
01 明年计划怎么做?三件事最容易犯错 《中国企业家》杂志社邀请我来参加这次领袖年会的时候,问我这次的私房课准备讲什么。我想这个时间点最好就是讲我们怎么去为下一年做计划。我一直认为大家对于管理最基本的东西准备得不够充分,我们会在日常工作当中有非常多的浪费,或者叫太辛苦。 你为什么会辛苦? ➭ 很多人 阅读全文
2020年4月14日 #
摘要:
正如大家所知,大数据建设的目标是为了融合组织数据,增加组织的洞察力和竞争力,实现业务创新和产业升级。而提高数据质量是为了巩固大数据建设成果,解决大数据建设成果不能满足业务要求的问题。并且,数据质量问题不仅仅是一个技术问题,它也可能出现在业务和管理的过程中。所以,要想提高数据质量,就必须懂行业、懂组织 阅读全文
2020年4月13日 #
摘要:
自研背景 可插拔的 HBase 索引组件 NoSQL 兴起无疑是大数据时代的标志性事件,创新者们不断打破关系型数据库“一种存储模式解决所有问题”的思路,发明了很多不同的产品应对细分的数据访问模式,它们提供了更好的服务特性,比如低延时、高并发等等。HBase 是其中极具代表性的产品,作为 Hadoop 阅读全文