随笔分类 - Akka

摘要：在《使用Akka构建集群（一）》一文中通过简单集群监听器的例子演示了如何使用Akka搭建一个简单的集群，本文将介绍一个相对看来更符合我们对于集群使用的业务需求的例子。阅读全文

posted @ 2018-11-23 12:31 泰山不老生阅读(1385) 评论(2) 推荐(2) 编辑

Spark2.1.0——内置RPC框架详解

摘要：在Spark中很多地方都涉及网络通信，比如Spark各个组件间的消息互通、用户文件与Jar包的上传、节点间的Shuffle过程、Block数据的复制与备份等。在Spark 0.x.x与Spark 1.x.x版本中，组件间的消息通信主要借助于Akka，使用Akka可以轻松的构建强有力的高并发与分布式应用。但是Akka在Spark 2.0.0版本中被移除了，https://img2018.cnblogs.com/blog/816981/201810/816981-20181016145505263-870721231.jpg 阅读全文

posted @ 2018-11-05 18:57 泰山不老生阅读(3090) 评论(0) 推荐(0) 编辑

Spark2.1.0模型设计与基本架构（上）

摘要：随着近十年互联网的迅猛发展，越来越多的人融入了互联网——利用搜索引擎查询词条或问题；社交圈子从现实搬到了Facebook、Twitter、微信等社交平台上；女孩子们现在少了逛街，多了在各大电商平台上的购买；喜欢棋牌的人能够在对战平台上找到世界各地的玩家对弈。在国内随着网民数量的持续增加，造成互联网公司的数据在体量、产生速度、多样性等方面呈现出巨大的变化。本文将对Spark的背景、基础知识、模块设计进行介绍。阅读全文

posted @ 2018-09-18 10:44 泰山不老生阅读(2022) 评论(4) 推荐(0) 编辑

使用Akka构建集群（一）

摘要：Akka提供的非常吸引人的特性之一就是轻松构建自定义集群，这也是我要选择Akka的最基本原因之一。如果你不想敲太多代码，也可以通过简单的配置构建一个非常简单的集群。本文为说明Akka集群构建的学习成本低廉，以Akka官网的例子代码出发，进行简单改造后与Spring集成。阅读全文

posted @ 2018-06-07 11:39 泰山不老生阅读(4314) 评论(0) 推荐(2) 编辑

使用Akka的远程调用

摘要：正如其它RPC或者RMI框架那样，Akka也提供了远程调用的能力。服务端在监听的端口上接收客户端的调用。本文将在《Spring与Akka的集成》一文的基础上介绍Akka的remote调用，本文很多代码和例子来源于Akka官网的代码示例，也包含了一些适用于Spring集成的改造，本文旨在介绍Akka的远程调用的开发过程。阅读全文

posted @ 2018-05-28 11:15 泰山不老生阅读(3811) 评论(0) 推荐(1) 编辑

Spring与Akka的集成

摘要：近年来随着Spark的火热，Spark本身使用的开发语言Scala、用到的分布式内存文件系统Tachyon（现已更名为Alluxio）以及基于Actor并发编程模型的Akka都引起了大家的注意。了解过Akka或者Actor的人应该知道，这的确是一个很不错的框架，按照Akka官网的描述——使用Akka使得构建强有力的并发与分布式应用将更加容易。由于历史原因，很多Web系统在开发分布式服务时首先会选择RMI(Remote Method Invoke ,远程方法调用)、RPC(Remote Procedure Call Protocol,远程过程调用)或者使用JMS（Java Messaging Service,Java消息服务）。阅读全文

posted @ 2018-03-16 14:45 泰山不老生阅读(5155) 评论(0) 推荐(0) 编辑