北漂屌丝 - 博客园

2019年8月6日

摘要：写入方式 producer 采用推（push）模式将消息发布到 broker，每条消息都被追加（append）到分区（patition）中，属于顺序写磁盘（顺序写磁盘效率比随机写内存要高，保障 kafka 吞吐率）写入方式 producer 采用推（push）模式将消息发布到 broker，每条消阅读全文

posted @ 2019-08-06 19:47 北漂屌丝阅读(1295) 评论(0) 推荐(0) 编辑

java关键字 this

摘要：解决成员变量和参数（局部变量）之间的二义性同类中实例方法间互相调用（此时可以省略this，但不建议省略）将this作为参数传递给类中另一个方法将this作为方法的返回值（链式方法编程）构造器重载的互调，this（[参数]）必须写在构造方法第一行 static不能和this一起使用：当字节码被阅读全文

posted @ 2019-08-06 15:30 北漂屌丝阅读(138) 评论(0) 推荐(0) 编辑

jdbc-mysql 中文乱码解决

摘要：在客户端或者JDBC连接时定制支持中文的编码格式（通常使用UTF-8），这样插入数据的时候，让mysql为自动为我们转码，可行的办法有两种: 1、如果是通过DriverManager.getConnection(url)编码方式操作JDBC，可以在JDBC的url中追加useUnicode=true 阅读全文

posted @ 2019-08-06 07:51 北漂屌丝阅读(995) 评论(0) 推荐(0) 编辑

2019年8月5日

JVM 栈堆和方法区

摘要：栈区栈区描述的是方法执行的内存模型。每个方法在执行时都会创建一个栈帧(存储局部变量、操作数栈、动态链接、方法出口等) JVM为每个线程创建一个栈，栈属于线程私有，不能实现线程间的共享，用于存放该线程执行方法的信息(实际参数、局部变量等) 基本类型变量去，执行环境上下文，操作指令区(存放操作指令) 阅读全文

posted @ 2019-08-05 20:08 北漂屌丝阅读(2157) 评论(0) 推荐(0) 编辑

消息队列模式及特点

摘要：消息队列模式点对点模式（一对一，消费者主动拉取数据，消息收到后消息清除）发布/订阅模式（一对多，数据生产后，推送给所有订阅者）模式点对点模式（一对一，消费者主动拉取数据，消息收到后消息清除）发布/订阅模式（一对多，数据生产后，推送给所有订阅者）点对点模式（一对一，消费者主动拉取数据，消阅读全文

posted @ 2019-08-05 17:16 北漂屌丝阅读(683) 评论(0) 推荐(0) 编辑

HBase 特点

摘要： HBase 是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，特点：海量存储列式存储极易扩展高并发稀疏海量存储列式存储极易扩展高并发稀疏阅读全文

posted @ 2019-08-05 16:42 北漂屌丝阅读(853) 评论(0) 推荐(0) 编辑

Hive 和 HBase 区别

摘要： Hive 数据仓库，Hive 的本质其实就相当于将 HDFS 中已经存储的文件在Mysql中做了一个双射关系，以方便使用 HQL 去管理查询用于数据分析、清洗，Hive 适用于离线的数据分析和清洗，延迟较高基于 HDFS、MapReduce，Hive存储的数据依旧在DataNode上，编写的 H 阅读全文

posted @ 2019-08-05 12:10 北漂屌丝阅读(186) 评论(0) 推荐(0) 编辑

Flume 参数调优

摘要： Flume 参数调优 Source 增加 Source 数量（使用 Tair Dir Source 时可增加 FileGroups 个数），可以增大 Source 的读取数据的能力。例如：当某一个目录产生的文件过多时需要将这个文件目录拆分成多个文件目录，同时配置好多个 Source 以保证 Sour 阅读全文

posted @ 2019-08-05 09:48 北漂屌丝阅读(853) 评论(0) 推荐(0) 编辑

FLUME架构

摘要： Flume是一个，基于流式架构的，灵活简单的，高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统 Agent Agent 是一个 JVM 进程，它以事件的形式将数据从源头送至目的地，Agent 主要有 3 个部分组成：Source、Channel、Sink Source Source 是负责阅读全文

posted @ 2019-08-05 09:41 北漂屌丝阅读(263) 评论(0) 推荐(0) 编辑

2019年8月4日

rwx权限

摘要： rwx作用到文件 [ r ]代表可读(read): 可以读取,查看 [ w ]代表可写(write): 可以修改,但是不代表可以删除该文件,删除一个文件的前提条件是对该文件所在的目录有写权限，才能删除该文件 [ x ]代表可执行(execute):可以被执行 [ r ]代表可读(read): 可以读阅读全文

posted @ 2019-08-04 21:06 北漂屌丝阅读(1142) 评论(0) 推荐(0) 编辑

beipiaodiaosi