Bingmous

JVM学习笔记（详细）

摘要：目录 01 JVM与Java体系结构简介 JVM整体架构，HotSpot java代码执行流程 JVM架构模型 JVM生命周期 JVM发展历程 02 类加载子系统 JVM细节版架构类加载器的作用类的加载过程类加载器分类双亲委派机制其他 03 运行时数据区概述及线程 04 程序计数器 05 阅读全文

posted @ 2020-11-20 16:20 Bingmous 阅读(86) 评论(0) 推荐(0) 编辑

Spark学习笔记（详细）

摘要： Spark Core 第1章 Spark 概述 Spark是一种基于内存的快速、通用、可扩展的大数据分析计算引擎Spark和Hadoop 的根本差异是多个作业之间的数据通信问题: Spark多个作业之间数据通信基于内存，而Hadoop基于磁盘Spark是基于内... 阅读全文

posted @ 2020-11-20 16:19 Bingmous 阅读(200) 评论(0) 推荐(0) 编辑

电商数仓项目

摘要： 1 用户行为数据采集第1章数据仓库的概念数据仓库：为企业所有决策过程，提供所有数据支持的战略集合。包括对数据的清洗、分类、重组、合并、拆分、统计等等第2 章项目需求及架构设计项目需求：用户行为数据采集平台搭建，业务数据采集平台搭建，数据仓库维度建模... 阅读全文

posted @ 2020-09-20 19:44 Bingmous 阅读(160) 评论(0) 推荐(0) 编辑

大数据组件安装配置汇总、脚本汇总

摘要：目录虚拟机准备配置hadoop集群配置zookeeper集群安装flume 配置kafka集群安装mysql 安装sqoop 安装hive2.3 hive集成Tez引擎安装azkaban 常用脚本虚拟机准备第一次安装centos7配置，ht... 阅读全文

posted @ 2020-09-19 13:57 Bingmous 阅读(58) 评论(0) 推荐(0) 编辑

Java -- next()和nextLine()的区别

摘要： next()读取有效字符串，遇到Tab、空格、回车结束，所以不能接收带空格的字符串 nextLine()读取一行，只是以回车结束，所以可以接收带空格的字符串 https://blog.csdn.net/qq_38986609/article/details/7... 阅读全文

posted @ 2020-09-19 11:02 Bingmous 阅读(23) 评论(0) 推荐(0) 编辑

Java -- List与数组转换

摘要： list转数组使用for循环使用list.toArray(new String[])，不可以强制转换list.toArray()，因为数组在jvm是一个object表示的，是一个对象数组转list 使用for循环使用数组工具类Arrays：list = Ar... 阅读全文

posted @ 2020-08-15 12:42 Bingmous 阅读(40) 评论(0) 推荐(0) 编辑

Scala学习笔记（详细）

摘要：第2章变量 val，var，声明变量必须初始化；变量类型确定后不可更改数据类型：与java有相同的数据类型，在scala中数据类型都是对象特殊类型：Unit：表示无值，只有一个实例值写出()，相当于void；Null：null；Nothing：null（表示... 阅读全文

posted @ 2020-08-13 10:16 Bingmous 阅读(34) 评论(0) 推荐(0) 编辑

Hadoop配置文件汇总

摘要：（一）基本集群配置共8个配置文件 hadoop-env.shyarn-env.shmapred-env.shcore-site.xmlhdfs-site.xmlyarn-site.xmlmapred-site.xmlslavesssh免密登录修改JAVA_H... 阅读全文

posted @ 2020-08-02 08:55 Bingmous 阅读(245) 评论(0) 推荐(0) 编辑

HBase学习笔记

摘要：第1章 HBase 简介 HBase定义：HBase 是一种分布式、可扩展、支持海量数据存储的NoSQL 数据库。 HBase 数据模型逻辑上是一张表，底层物理存储是kv HBase 逻辑结构：row_key（逻辑上一行的key），列族（column fam... 阅读全文

posted @ 2020-07-29 13:54 Bingmous 阅读(24) 评论(0) 推荐(0) 编辑

Kafka学习笔记（整理）

摘要： [TOC] # Kafka概述 - 定义：分布式的基于发布/订阅模式的消息队列，主要应用于大数据实时处理领域。 - 消息队列的好处： - 解耦：允许独立的扩展或修改数据生产者消费者，只需要确保同样的接口约束。 - 可恢复性：一部分组件失效，不会影响整个系统。消息队列降低进程间的耦合度，即使一个处理消阅读全文

posted @ 2020-07-25 23:51 Bingmous 阅读(57) 评论(0) 推荐(0) 编辑

导航

公告