摘要：
摘要： （1）kafka和flume都是日志系统。kafka是分布式消息中间件，自带存储，提供push和pull存取数据功能。flume分为agent（数据采集器）,collector（数据简单处理和写入）,storage（存储器）三部分，每一部分都是可以定制的。比如agent采用RPC（Th... 阅读全文
摘要：
elasticsearch 摘要： 1 es是一个分布式全文搜索引擎。特定是：无中心化，实时，扩展性强。 2. es有几个好的概念或者特点：（1）cluster 集群无中心化。（2）shards。分片，通过分片实现分布式。（3）通过快照的方式实现方便的备份和恢复。 ... 阅读全文
摘要：
摘要：es可以通过简单的命令对索引或者整个集群进行快照和恢复 快照和恢复 Snapshot and restore 模块允许创建单个索引或者整个集群的快照到远程仓库. 在初始版本里只支持共享文件系统的仓库，但是现在通过官方的仓库插件可以支持各种各样的后台仓库。 仓库 在进行任... 阅读全文
摘要：
（1）官网的一个例子 #include #include #include #include #include int main() { log4cxx::FileAppender * fileAppender = newlog4cxx::FileAppender(log4cxx::L... 阅读全文
摘要：
转自：https://github.com/alibaba/RocketMQ/wiki/rmq_vs_kafka 淘宝内部的交易系统使用了淘宝自主研发的Notify消息中间件，使用Mysql作为消息存储媒介，可完全水平扩容，为了进一步降低成本，我们认为存储部分可以进一步优化，2011年初，L... 阅读全文
摘要：
摘要：（1）任何工具语言md5的结果是一样的 php中md5函数与linux中md5sum结果不同的问题 2014-05-05 11:04:40| 分类： 技术相关 | 标签：php linux md5 md5sum |举报|字号 订阅 简而言... 阅读全文
摘要：
摘要：（1）网络服务会根据 request的header中的 cache-control策略设置response的cache-control策略 1 response cache-control 和 request cache-control关系 CacheIgnoreCacheContro... 阅读全文
摘要：
==是什么 == 目标Scope（解决什么问题） 在大规模的特定数据集上的迭代运算或重复查询检索 官方定义 aMapReduce-like cluster computing framework designed for low-latency iterativejo... 阅读全文
摘要：
摘要： spark的优势：（1）图计算，迭代计算（2）交互式查询计算 spark特点：（1）分布式并行计算框架（2）内存计算，不仅数据加载到内存，中间结果也存储内存 为了满足挖掘分析与交互式实时查询的计算需求，腾讯大数据使用了Spark平台来支持挖掘分析类计算、交互式实时查询计算... 阅读全文
摘要：
命令查询列表：http://www.cmake.org/cmake/help/v3.2/manual/cmake-commands.7.html # # Official dependency number 0: CMake. # Obviously, we must have it i... 阅读全文