随笔分类 -  海量数据分析

摘要:http://blog.csdn.net/hawksoft/article/details/7192207实任何简单的问题,只要规模大了都会成为一个问题,就如中国人口多,很多小问题都会变成大问题一样。但处理这种海量数据的方法无非就是分治和”人海”战术。使用人海战术的前提是问题的划分能够支持这种人海战... 阅读全文
posted @ 2015-04-27 18:51 dapeng888 阅读(474) 评论(0) 推荐(0) 编辑
摘要:原文地址:http://mengqingyu.iteye.com/blog/1830572一.应用服务器负载均衡1.链路负载均衡通过DNS解析域名时,将客户端的访问解析成不同的IP,分配到不同的入口,同时尽可能保证所访问的入口是所有入口中可能较快的一个。2.软件负载均衡访问时生成页面的任务会被分配给... 阅读全文
posted @ 2015-04-27 18:46 dapeng888 阅读(296) 评论(0) 推荐(0) 编辑
摘要:原文地址:http://blog.csdn.net/hanruikai/article/details/7743466大容量数据库对表做分割可以提高性能。表分割有以下三种方式:水平分割 根据一列或多列数据的值把数据行放到两个独立的表中。 水平分区将表分为多个表。每个表包含的列数相同,但是行更少。例如... 阅读全文
posted @ 2014-11-03 17:24 dapeng888 阅读(182) 评论(0) 推荐(0) 编辑
摘要:17:04:05问下 在什么情况下 审核分区啊 ~..大熊..o○ 17:06:53这个要看应用~..大熊..o○ 17:07:37比如数据量很大,查询多是按照时间段查询,就可以用时间段来做分区~..大熊..o○ 17:07:49或者按照客户来分类 阅读全文
posted @ 2014-08-14 10:38 dapeng888 阅读(504) 评论(0) 推荐(0) 编辑
摘要:原文地址:http://www.cnblogs.com/ppcompany/articles/2950040.html何谓海量数据处理?所谓海量数据处理,无非就是基于海量数据上的存储、处理、操作。何谓海量,就是数据量太大,所以导致要么是无法在较短时间内迅速解决,要么是数据太大,导致无法一次性装入内存... 阅读全文
posted @ 2014-04-25 15:05 dapeng888 阅读(641) 评论(0) 推荐(0) 编辑
摘要:原文地址:http://hi.baidu.com/lingyu125/item/9dcb9bdf9f249ed8251f4013 分布式缓存 - Hash算法一、根据余数计算分布Hash()modn就是“根据服务器台数的余数进行分散”。求得键的整数哈希值,再除以服务器台数,根据其余数来选择服务器。根... 阅读全文
posted @ 2014-04-25 15:04 dapeng888 阅读(341) 评论(0) 推荐(1) 编辑

点击右上角即可分享
微信分享提示