随笔分类 -  Java核心

1 2 下一页
java高阶使用 JVM原理
使用Akka构建集群（二）
摘要：在《使用Akka构建集群（一）》一文中通过简单集群监听器的例子演示了如何使用Akka搭建一个简单的集群，本文将介绍一个相对看来更符合我们对于集群使用的业务需求的例子。 阅读全文
posted @ 2018-11-23 12:31 泰山不老生 阅读(1386) 评论(2) 推荐(2) 编辑
Spark2.1.0——内置RPC框架详解
摘要：在Spark中很多地方都涉及网络通信，比如Spark各个组件间的消息互通、用户文件与Jar包的上传、节点间的Shuffle过程、Block数据的复制与备份等。在Spark 0.x.x与Spark 1.x.x版本中，组件间的消息通信主要借助于Akka，使用Akka可以轻松的构建强有力的高并发与分布式应用。但是Akka在Spark 2.0.0版本中被移除了，https://img2018.cnblogs.com/blog/816981/201810/816981-20181016145505263-870721231.jpg 阅读全文
posted @ 2018-11-05 18:57 泰山不老生 阅读(3091) 评论(0) 推荐(0) 编辑
Spark2.1.0模型设计与基本架构（上）
摘要：随着近十年互联网的迅猛发展，越来越多的人融入了互联网——利用搜索引擎查询词条或问题；社交圈子从现实搬到了Facebook、Twitter、微信等社交平台上；女孩子们现在少了逛街，多了在各大电商平台上的购买；喜欢棋牌的人能够在对战平台上找到世界各地的玩家对弈。在国内随着网民数量的持续增加，造成互联网公司的数据在体量、产生速度、多样性等方面呈现出巨大的变化。本文将对Spark的背景、基础知识、模块设计进行介绍。 阅读全文
posted @ 2018-09-18 10:44 泰山不老生 阅读(2023) 评论(4) 推荐(0) 编辑
Spark2.1.0——剖析spark-shell
摘要：通过在spark-shell中执行word count的过程，让读者了解到可以使用spark-shell提交Spark作业。现在读者应该很想知道spark-shell究竟做了什么呢？本文将详细分析这其中的奥秘。 阅读全文
posted @ 2018-06-13 10:14 泰山不老生 阅读(1329) 评论(0) 推荐(0) 编辑
使用Akka构建集群（一）
摘要：Akka提供的非常吸引人的特性之一就是轻松构建自定义集群，这也是我要选择Akka的最基本原因之一。如果你不想敲太多代码，也可以通过简单的配置构建一个非常简单的集群。本文为说明Akka集群构建的学习成本低廉，以Akka官网的例子代码出发，进行简单改造后与Spring集成。 阅读全文
posted @ 2018-06-07 11:39 泰山不老生 阅读(4315) 评论(0) 推荐(2) 编辑
使用Akka的远程调用
摘要：正如其它RPC或者RMI框架那样，Akka也提供了远程调用的能力。服务端在监听的端口上接收客户端的调用。本文将在《Spring与Akka的集成》一文的基础上介绍Akka的remote调用，本文很多代码和例子来源于Akka官网的代码示例，也包含了一些适用于Spring集成的改造，本文旨在介绍Akka的远程调用的开发过程。 阅读全文
posted @ 2018-05-28 11:15 泰山不老生 阅读(3812) 评论(0) 推荐(1) 编辑
Spark2.1.0——Spark初体验
摘要：学习一个工具的最好途径，就是使用它。在IT领域，在深入了解一个系统的原理、实现细节之前，应当先准备好它的运行环境或者源码阅读环境。如果能在实际环境下安装和运行Spark，显然能够提升读者对于Spark的一些感受，对系统能有个大体的印象，有经验的工程师甚至能够猜出一些Spark在实现过程中采用的设计模式、编程模型。在准备好基本的Spark运行环境后应当实践一下，以便于在使用过程中提升读者对于Spark最直接的感触！本文通过Spark的基本使用，让读者对Spark能有初步的认识，便于引导读者逐步深入学习。 阅读全文
posted @ 2018-05-21 15:48 泰山不老生 阅读(1818) 评论(0) 推荐(1) 编辑
Spring与Akka的集成
摘要：近年来随着Spark的火热，Spark本身使用的开发语言Scala、用到的分布式内存文件系统Tachyon（现已更名为Alluxio）以及基于Actor并发编程模型的Akka都引起了大家的注意。了解过Akka或者Actor的人应该知道，这的确是一个很不错的框架，按照Akka官网的描述——使用Akka使得构建强有力的并发与分布式应用将更加容易。由于历史原因，很多Web系统在开发分布式服务时首先会选择RMI(Remote Method Invoke ,远程方法调用)、RPC(Remote Procedure Call Protocol,远程过程调用)或者使用JMS（Java Messaging Service,Java消息服务）。 阅读全文
posted @ 2018-03-16 14:45 泰山不老生 阅读(5155) 评论(0) 推荐(0) 编辑
Hadoop2.6.0的FileInputFormat的任务切分原理分析（即如何控制FileInputFormat的map任务数量）
摘要：我在测试mapreduce任务时，发现相比于使用Job.setNumReduceTasks(int)控制reduce任务数量而言，控制map任务数量一直是一个困扰我的问题。好在经过很多摸索与实验，终于梳理出来，希望对在工作中进行Hadoop进行性能调优的新人们有个借鉴。本文只针对FileInputFormat的任务划分进行分析，其它类型的InputFormat的划分方式又各有不同。虽然如此，都可以按照本文类似的方法进行分析和总结。 阅读全文
posted @ 2016-05-23 13:36 泰山不老生 阅读(3194) 评论(0) 推荐(2) 编辑
Hadoop2.6.0子项目hadoop-mapreduce-examples的简单介绍
摘要：引文 学习Hadoop的同学们，一定知道如果运行Hadoop自带的各种例子，以大名鼎鼎的wordcount为例，你会输入以下命令： 当然，有些人还会用以下替代方式： 相比于原始的执行方式，使用jar命令方式，让我们不用再敲入繁琐的完整包路径。比如我们知道hadoop-mapreduce-exampl 阅读全文
posted @ 2016-04-29 13:16 泰山不老生 阅读(3289) 评论(0) 推荐(1) 编辑
Hadoop2.6.0的事件分类与实现
摘要：说实在的，在阅读Hadoop YARN的源码之前，我对于java枚举的使用相形见绌。YARN中实现的事件在可读性、可维护性、可扩展性方面的工作都值得借鉴。 阅读全文
posted @ 2016-04-27 15:19 泰山不老生 阅读(708) 评论(0) 推荐(2) 编辑
记一次Web服务的性能调优
摘要：前言 一个项目在经历开发、测试、上线后，当时的用户规模还比较小，所以刚刚上线的项目一般会表现稳定。但是随着时间的推移，用户数量的增加，qps的增加等因素会造成项目慢慢表现出网页半天无响应的状况。在之前的工作中也恰巧遇到这个过程，当时对项目进行了很多性能测试和调优，今天借助博客园，将这次性能调优的过... 阅读全文
posted @ 2016-01-01 12:41 泰山不老生 阅读(4722) 评论(0) 推荐(3) 编辑
Tomcat源码分析——Session管理分析（下）
摘要：前言 在《TOMCAT源码分析——SESSION管理分析（上）》一文中我介绍了Session、Session管理器，还以StandardManager为例介绍了Session管理器的初始化与启动，本文将接着介绍Session管理的其它内容。 Session分配 在《TOMCAT源码分析——请求原理分 阅读全文
posted @ 2015-11-04 09:43 泰山不老生 阅读(3325) 评论(1) 推荐(1) 编辑
Tomcat源码分析——Session管理分析（上）
摘要：前言 对于广大java开发者而已，对于J2EE规范中的Session应该并不陌生，我们可以使用Session管理用户的会话信息，最常见的就是拿Session用来存放用户登录、身份、权限及状态等信息。对于使用Tomcat作为Web容器的大部分开发人员而言，Tomcat是如何实现Session标记用户... 阅读全文
posted @ 2015-11-02 09:01 泰山不老生 阅读(6465) 评论(0) 推荐(2) 编辑
JAVA泛型——逆变
摘要：在上篇《JAVA泛型——协变》这篇文章中遗留以下问题——协变不能解决将子类型添加到父类型的泛型列表中。本篇将用逆变来解决这个问题。实验准备 我们首先增加以下方法，见代码清单1所示。代码清单1/** * * 描 述：Exp3使用逆变 * 作 者：jiaan.gja ... 阅读全文
posted @ 2015-10-29 12:05 泰山不老生 阅读(1449) 评论(2) 推荐(2) 编辑
JAVA泛型——协变
摘要：在上篇《JAVA泛型——基本使用》这篇文章中遗留以下问题，即将子类型Table或者也能添加到父类型Auction的泛型中，要实现这种功能必须借助于协变。实验准备 现在在《JAVA泛型——基本使用》一文展示的Decorator类型的基础上，增加一些代码，如代码清单1所示。代码清单1/** ... 阅读全文
posted @ 2015-10-28 09:27 泰山不老生 阅读(3016) 评论(3) 推荐(2) 编辑
JAVA泛型——基本使用
摘要：Java1.5版本推出了泛型，虽然这层语法糖给开发人员带来了代码复用性方面的提升，但是这不过是编译器所做的一层语法糖，在真正生成的字节码中，这类信息却被擦除了。笔者发现很多几年开发经验的程序员，依然不善于使用Java泛型，本文将从Java泛型的基本使用入手，在今后的多篇博文里，对泛型的使用做个总... 阅读全文
posted @ 2015-10-27 14:58 泰山不老生 阅读(1322) 评论(0) 推荐(1) 编辑
Tomcat源码分析——请求原理分析（下）
摘要：前言 本文继续讲解TOMCAT的请求原理分析，建议朋友们阅读本文时首先阅读过《TOMCAT源码分析——请求原理分析（上）》和《TOMCAT源码分析——请求原理分析（中）》。在《TOMCAT源码分析——请求原理分析（中）》一文我简单讲到了Pipeline，但并未完全展开，本文将从Pipeline开始... 阅读全文
posted @ 2015-10-23 17:23 泰山不老生 阅读(5269) 评论(0) 推荐(4) 编辑
Tomcat源码分析——请求原理分析（中）
摘要：前言 在《TOMCAT源码分析——请求原理分析（上）》一文中已经介绍了关于Tomcat7.0处理请求前作的初始化和准备工作，请读者在阅读本文前确保掌握《TOMCAT源码分析——请求原理分析（上）》一文中的相关知识以及HTTP协议和TCP协议的一些内容。本文重点讲解Tomcat7.0在准备好接受请求... 阅读全文
posted @ 2015-10-21 11:20 泰山不老生 阅读(5109) 评论(2) 推荐(2) 编辑
Tomcat源码分析——请求原理分析（上）
摘要：前言 谈起Tomcat的诞生，最早可以追溯到1995年。近20年来，Tomcat始终是使用最广泛的Web服务器，由于其使用Java语言开发，所以广为Java程序员所熟悉。很多人早期的J2EE项目，由程序员自己实现Jsp页面或者Servlet接受请求，后来借助Struts1、Struts2、Spri... 阅读全文
posted @ 2015-10-16 16:29 泰山不老生 阅读(9478) 评论(4) 推荐(1) 编辑

1 2 下一页
点击右上角即可分享
微信分享提示