随笔分类 - BigData
摘要：数据库特性之原子性和一致性 数据库的四大特性：原子性，一致性，隔离性和持久性。其中： 原子性：指事务包含的所有操作要么全部成功，要么全部失败回滚； 一致性：指事务必须使数据库从一个一致性状态变换到另一个一致性状态，也就是说一个事务执行之前和执行之后都必须处于一致性状态。 我当时看见这两个特性就感觉很
阅读全文
摘要：Hadoop到底是干什么用的？ https://www.zhihu.com/question/333417513 作者：蛙课网链接：https://www.zhihu.com/question/333417513/answer/742465814来源：知乎著作权归作者所有。商业转载请联系作者获得授权
阅读全文
摘要：hadoop与spark的区别是什么1、目的：首先需要明确一点，hadoophe spark 这二者都是大数据框架，即便如此二者各自存在的目的是不同的。Hadoop是一个分布式的数据基础设施，它是将庞大的数据集分派到由若干台计算机组成的集群中的多个节点进行存储。Spark是一个专门用来对那些分布式存
阅读全文
摘要：深入浅出一致性Hash原理 https://www.jianshu.com/p/e968c081f563 一、前言 在解决分布式系统中负载均衡的问题时候可以使用Hash算法让固定的一部分请求落到同一台服务器上，这样每台服务器固定处理一部分请求（并维护这些请求的信息），起到负载均衡的作用。 但是普通的
阅读全文
摘要：什么是分布式系统，如何学习分布式系统 目录 什么是分布式系统 分布式系统挑战 分布式系统特性与衡量标准 组件、理论、协议 用一个请求串起来 一个简化的架构图 概念与实现 总结 references 目录 什么是分布式系统 分布式系统挑战 分布式系统特性与衡量标准 组件、理论、协议 用一个请求串起来
阅读全文
摘要：Storm介绍(一) 作者:Jack47 PS：如果喜欢我写的文章，欢迎关注我的微信公众账号程序员杰克，两边的文章会同步，也可以添加我的RSS订阅源。 内容简介 本文是Storm系列之一，介绍了Storm的起源，Storm作者的八卦，Storm的特点和Storm模型的基本原理，着重介绍了Storm中
阅读全文
摘要：在Storm之前，进行实时处理是非常痛苦的事情: 需要维护一堆消息队列和消费者，他们构成了非常复杂的图结构。消费者进程从队列里取消息，处理完成后，去更新数据库，或者给其他队列发新消息。 这样进行实时处理是非常痛苦的。我们主要的时间都花在关注往哪里发消息，从哪里接收消息，消息如何序列化，真正的业务逻辑
阅读全文
摘要：Java并发问题--乐观锁与悲观锁以及乐观锁的一种实现方式-CAS 首先介绍一些乐观锁与悲观锁: 悲观锁：总是假设最坏的情况，每次去拿数据的时候都认为别人会修改，所以每次在拿数据的时候都会上锁，这样别人想拿这个数据就会阻塞直到它拿到锁。传统的关系型数据库里边就用到了很多这种锁机制，比如行锁，表锁等，
阅读全文
摘要：分布式服务框架 dubbo/dubbox 入门示例 dubbo是一个分布式的服务架构，可直接用于生产环境作为SOA服务框架。 官网首页：http://dubbo.io/ ，官方用户指南 http://dubbo.io/User+Guide-zh.htm上面的几张图画得不错，完全可以当做SOA架构的学
阅读全文
摘要：[置顶] MQ选型对比RabbitMQ RocketMQ ActiveMQ Kafka 综合选择RabbitMq
阅读全文
摘要：ActiveMQ持久化消息的三种方式 1：前言 这一段给公司开发消息总线有机会研究ActiveMQ，今天撰文给大家介绍一下他的持久化消息。本文只介绍三种方式,分别是持久化为文件，MYSql，Oracle。下面逐一介绍。 A：持久化为文件 这个你装ActiveMQ时默认就是这种，只要你设置消息为持久化
阅读全文
摘要：Dubbox的介绍和简单示例 https://github.com/dangdangdotcom/dubbox http://www.sohu.com/a/115234862_464071 Dubbo是一个来自阿里巴巴的开源分布式服务框架，当当根据自身的需求，为Dubbo实现了一些新的功能，包括RE
阅读全文
摘要：浅谈redis和memcached的区别 缓存技术方面说到redis大家必然会联想到memcached，了解它们的人应该都知道以下几点吧 redis与 memcached相比，redis支持key-value数据类型，同事支持list、set、hash等数据结构的存储。 redis支持数据的备份，即
阅读全文
摘要：Dubbo与Zookeeper、SpringMVC整合和使用（负载均衡、容错） 在给大家介绍ZooKeeper之前先来给大家介绍一种技术——分布式协调技术。 那么什么是分布式协调技术？那么我来告诉大家，其实分布式协调技术， 主要用来解决分布式环境当中多个进程之间的同步控制，让他们有序的去访问某种临界
阅读全文
摘要：Zookeeper系列（一） 一、ZooKeeper的背景 1.1 认识ZooKeeper ZooKeeper 译名为“动物园管理员”。动物园里当然有好多的动物，游客可以根据动物园提供的向导图到不同的场馆观赏各种类型的动物，而不是像走在原始丛林里，心惊胆颤的被动 物所观赏。为了让各种不同的动物呆在它
阅读全文
