摘要:
Java基础知识Java中常用算法:冒泡、选择、快速冒泡:两两比较,每一轮(0~length-i)挑出一个最值,并将其移除,循环遍历1~length 选择:外面定义从0~length-1,先选定一个最先面的下目标作为最小下标,将其所对应的值逐一与其他比较,如果有人小于... 阅读全文
摘要:
1、fsimage和edit的区别?Namenode主要维护两个文件,一个是fsimage,一个是editlog。fsimage保存了最新的元数据检查点,包含了整个HDFS文件系统的所有目录和文件的信息。对于文件来说包括了数据块描述信息、修改时间、访问时间等... 阅读全文
摘要:
熟练使用kettle数据转换工具Kettle了解过,因为公司使用的 是oozie,不过这只是数据处理的工具,都可以学习数据库优化:索引优化:将经常查询的字段创建索提高查询速度SQL:表关联时,将数据量少的表放在右边Where执行的是之下往上的,尽可能把过滤大量数据的条... 阅读全文
摘要:
一、协处理器—Coprocessor 1、 起源Hbase 作为列族数据库最经常被人诟病的特性包括:无法轻易建立“二级索引”,难以执 行求和、计数、排序等操作。比如,在旧版本的( hbase.coprocessor.user.region.class... 阅读全文
摘要:
1、分布式与并行处理 分布式系统通常,我们说分布式系统的时候,我们都会想到Dubbo框架和SpringCloud框架。这两个框架现在应该是国内用的比较多的两个分布式框架了,特点都是很容易把服务部署在多台机器组成一个高可用的服务集群来应对高并发。所以,我们通常认为分布式... 阅读全文
摘要:
摘要: 本文讲解一个完整的企业级大数据项目实战,实时|离线统计分析用户的搜索话题,并用酷炫的前端界面展示出来。这些指标对网站的精准营销、运营都有极大帮助。前言:本文是一个完整的大数据项目实战,实时|离线统计分析用户的搜索话题,并用酷炫的前端界面展示出来。这些... 阅读全文
摘要:
/** * @author Mr.lu * @Title: KafkaStreamingWordCount * @ProjectName spark-scala * @Description: TODO * @date 2018/11/19:16:58 */impor... 阅读全文
摘要:
--------------日志使用1.maven依赖 org.slf4j slf4j-log4j12 1.7.25 org.slf4j slf4j-api 1.7.252.代码案例import org.slf4j.Logger;i... 阅读全文