摘要: 多线程全面详解总结 一、多线程是什么?为什么要用多线程? 介绍多线程之前要介绍线程,介绍线程则离不开进程。 首先 进程 :是一个正在执行中的程序,每一个进程执行都有一个执行顺序,该顺序是一个执行路径,或者叫一个控制单元; 线程:就是进程中的一个独立控制单元,线程在控制着进程的执行。一个进程中至少有一 阅读全文
posted @ 2020-05-21 17:17 岚樱 阅读(199) 评论(0) 推荐(0) 编辑
摘要: Spark架构与作业执行流程简介 Local模式 运行Spark最简单的方法是通过Local模式(即伪分布式模式)。 运行命令为:./bin/run-example org.apache.spark.examples.SparkPi local 基于standalone的Spark架构与作业执行流程 阅读全文
posted @ 2020-04-25 10:07 岚樱 阅读(1608) 评论(0) 推荐(0) 编辑
摘要: 1. 概述 1.1 hive的特征: 可以通过SQL轻松访问数据的工具,从而实现数据仓库任务,如提取/转换/加载(ETL),报告和数据分析; 它可以使已经存储的数据结构化; 可以直接访问存储在Apache HDFS或其他数据存储系统(如Apache HBase)中的文件; Hive除了支持MapRe 阅读全文
posted @ 2020-04-19 19:20 岚樱 阅读(204) 评论(0) 推荐(0) 编辑
摘要: 1. 先是对图上的两个位置一番狂点进行刷新,然并卵... 于是又按照博客上的指示去寻找 Settings -> Build,Execution,Deployment -> Build Tools -> Maven -> Ignored Files 如下图: 然而这个对我依然没有什么帮助,但还是要记录 阅读全文
posted @ 2020-04-14 09:41 岚樱 阅读(3347) 评论(0) 推荐(0) 编辑
摘要: (0)写在前面 面试大厂时,一旦简历上写了Kafka,几乎必然会被问到一个问题:说说acks参数对消息持久化的影响? 这个acks参数在kafka的使用中,是非常核心以及关键的一个参数,决定了很多东西。 所以无论是为了面试还是实际项目使用,大家都值得看一下这篇文章对Kafka的acks参数的分析,以 阅读全文
posted @ 2020-04-11 21:43 岚樱 阅读(12889) 评论(0) 推荐(5) 编辑
摘要: c.a.o.c.p.inbound.mysql.rds.RdsBinlogEventParserProxy - prepare to find start position just show master status 2018-12-27 08:39:49.808 [destination = 阅读全文
posted @ 2020-04-08 09:35 岚樱 阅读(2692) 评论(0) 推荐(0) 编辑
摘要: 理解zookeeper选举机制 原文转自:https://www.cnblogs.com/ASPNET2008/p/6421571.html https://blog.csdn.net/cnh294141800/article/details/52959028/ http://blog.itpub. 阅读全文
posted @ 2020-04-06 20:19 岚樱 阅读(396) 评论(0) 推荐(0) 编辑
摘要: 1、hadoop的各种进程及其作用 NameNode:是hdfs的主服务器,管理文件系统的目录树以及对集群中存储文件的访问,保存有metadate,不断读取记录集群中dataNode主机状况和工作状态。 SecondaryNameNode:NameNode的冷备,负责周期性的合并esimage以及e 阅读全文
posted @ 2020-03-18 18:02 岚樱 阅读(1884) 评论(0) 推荐(0) 编辑
摘要: ————————————————版权声明:本文为CSDN博主「谷悦古月」的原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接及本声明。原文链接:https://blog.csdn.net/qq_28893679/article/details/80586714 阅读全文
posted @ 2020-03-02 19:11 岚樱 阅读(125) 评论(0) 推荐(0) 编辑
摘要: HBase是什么? 2004 谷歌发表的论文 1 衍生:bigtable 2 概念:数据库--》 底层hdfs > mysql 》 存储量TB 3 HBASE: 纯净: 》视图 事务 存储过程 语句 。。。。: 4hbase: 读写速度快 --》 hdfs--》? 5 hbase--> 存储格式: 阅读全文
posted @ 2020-02-17 15:32 岚樱 阅读(205) 评论(0) 推荐(0) 编辑