摘要: 行式数据库常见的比如mysql,sql server。数据是按照行存储,一行中数据在物理上连续的,常用于 OLTP。 KV式数据库常见的比如 Redis,memcached。数据都在内存中,性能好,常用于互联网高并发场景,可以作为缓存使用。 列式数据库常见的比如Hbase,ClickHouse。数据 阅读全文
posted @ 2021-09-24 01:29 秋夜 阅读(128) 评论(0) 推荐(0) 编辑
摘要: 该roadmap是对自身大数据知识的一个概括和梳理,之后会写一些博客对这些知识点进行展开。 大数据基础 Hadoop HDFS MR Yarn Spark spark 的原理 spark 常用算子。 spark 参数调优。 Flink 流计算 Hive/Hbase/Flume 大数据中还有其他的组件 阅读全文
posted @ 2021-09-23 02:10 秋夜 阅读(275) 评论(0) 推荐(0) 编辑
摘要: 基础 spring 系列 spring boot https://github.com/spring-projects/spring-boot https://github.com/zhaoyb/spring-boot 应用领域 API网关 incubator-shenyu(原soul) https 阅读全文
posted @ 2021-09-17 19:08 秋夜 阅读(92) 评论(0) 推荐(0) 编辑
摘要: LinkAgent(https://github.com/shulieTech/LinkAgent)是数列科技的一个基于Java的开源agent,通过字节码增强,实现对Java应用程序的数据收集和逻辑控制, 是全链路压测的一部分,同时开源的还有控制台(Takin-web)部分,对于压力构造部分还未开 阅读全文
posted @ 2021-10-25 11:45 秋夜 阅读(520) 评论(0) 推荐(0) 编辑
摘要: Java 线程池 Java的线程实现基本都是内核级线程,和内核线程是一一对应的,所以创建线程就需要在用户态和内核态切换,资源消耗比较大,一种比较好的解决方式就是线程的重复利用,通过线程池缓存一批线程来重复使用,降低消耗。 所以线程池也像一个缓存管理器,只是比普通的缓存稍微复杂一点,实现了更精细化的管 阅读全文
posted @ 2021-09-27 15:59 秋夜 阅读(81) 评论(0) 推荐(0) 编辑
摘要: Discovery(https://github.com/Nepxion/Discovery)是一个基于spring cloud的,可以执行蓝绿,灰度,路由等功能的一个框架。 功能就是在一个服务在线上有多个版本存在的时候,可以通过指定不同的版本,让流量流向不同的版本。 大致的实现方式如下: spri 阅读全文
posted @ 2021-09-17 19:03 秋夜 阅读(358) 评论(0) 推荐(0) 编辑
摘要: arthas与jvm-sandbox是阿里开源的JVM工具,都能够attach到一个正在运行的Java进程中,可以查看运行时的一些信息,并且可以通过对字节码的修改,来实现一些高级功能。 arthas和jvm-sandbox之所以能实现这些功能,主要依赖的有Java agent和ASM字节码修改。 j 阅读全文
posted @ 2021-09-15 16:31 秋夜 阅读(599) 评论(0) 推荐(0) 编辑
摘要: koalas-rpc(https://github.com/dromara/koalas-rpc) 是一个RPC 框架, 相比于 dubbo,它足够简单,无论是做二次开发还是想了解 RPC 原理,都有非常好的入手体验。 项目启动调用过程如下: 使用注解标注接口。 使用 zookeeper 作为注册中 阅读全文
posted @ 2021-08-29 00:49 秋夜 阅读(424) 评论(3) 推荐(0) 编辑
摘要: 简介 以曾经待过的一家互联网公司为例,介绍一下公司研发部门的组织架构和技术栈 公司研发部门组织架构 1. 产品部门 产品组:产品设计 设计组:视觉设计2. 研发部门 前端部门: 手机端: Android、IOS H5:web页面,微信小程序 服务端部门: 业务部门: 营销域:直播,活动,优惠券,秒杀 阅读全文
posted @ 2021-07-29 14:23 秋夜 阅读(1352) 评论(0) 推荐(0) 编辑
摘要: 简介 chaosblade-exec-jvm(https://github.com/chaosblade-io/chaosblade-exec-jvm) 关于混沌实验的意义和作用这里就不说了,这里只说实现。 Java项目混沌实验整体实现思路就是通过java agent 和字节码增强技术注入异常。 针 阅读全文
posted @ 2021-05-14 01:15 秋夜 阅读(1325) 评论(0) 推荐(0) 编辑