2014年11月22日

Spark分布式计算和RDD模型研究

摘要： 1背景介绍现今分布式计算框架像MapReduce和Dryad都提供了高层次的原语，使用户不用操心任务分发和错误容忍，非常容易地编写出并行计算程序。然而这些框架都缺乏对分布式内存的抽象和支持，使其在某些应用场景下不够高效和强大。RDD(Resilient Distributed Datasets弹性... 阅读全文

posted @ 2014-11-22 14:54 毛小娃 阅读(187) 评论(0) 推荐(0) 编辑

LMAX高并发系统架构

摘要： 很早就看到过MF的这篇The LMAX Architecture，可是之前一来英文水平不够，二来确实看不懂… 今天有幸再次看到，一口气读完终于有所领悟。1 Overall ArchitectureLMAX是一个新的金融交易平台。系统完全构建于JVM之上，却能在一个单线程上每秒处理6m的订单(其实是... 阅读全文

posted @ 2014-11-22 14:45 毛小娃 阅读(293) 评论(0) 推荐(0) 编辑

分布式缓存GemFire架构介绍

摘要： 1什么是GemFireGemFire是一个位于应用集群和后端数据源之间的高性能、分布式的操作数据(operational data)管理基础架构。它提供了低延迟、高吞吐量的数据共享和事件分发。GemFire充分利用网络中的内存和磁盘资源，形成一个实时的数据网格(data fabric or gri... 阅读全文

posted @ 2014-11-22 14:36 毛小娃 阅读(430) 评论(0) 推荐(1) 编辑

导航