Fork me on GitHub
上一页 1 2 3 4 5 6 ··· 21 下一页
摘要: 核心思想 读写分离,空间换时间,避免为保证并发安全导致的激烈的锁竞争。 关键点 1、CopyOnWrite适用于读多写少的情况,最大程度的提高读的效率; 2、CopyOnWrite是最终一致性,在写的过程中,原有的读的数据是不会发生更新的,只有新的读才能读到最新数据; 3、如何使其他线程能够及时读到 阅读全文
posted @ 2021-07-26 12:27 薄荷加冰2060 阅读(3374) 评论(0) 推荐(0) 编辑
摘要: 一个分布式系统里面,节点组成的网络本来应该是连通的。然而可能因为一些故障,使得有些节点之间不连通了,整个网络就分成了几块区域。数据就散布在了这些不连通的区域中。这就叫分区。 当你一个数据项只在一个节点中保存,那么分区出现后,和这个节点不连通的部分就访问不到这个数据了。这时分区就是无法容忍的。 提高分 阅读全文
posted @ 2021-07-24 09:22 薄荷加冰2060 阅读(456) 评论(0) 推荐(0) 编辑
摘要: 问题由来 磁盘如果使用得当,磁盘的速度完全可以匹配上网络 的数据传输速度。目前的高性能磁盘,顺序写速度可以达到600MB/s, 超过了一般网卡的传输速度。但是磁盘随机写的速度只有大概100KB/s,和顺序写的性能相差6000倍!因为有如此巨大的速度差别,好的消息队列系统会比普通的消息队列系统速度快多 阅读全文
posted @ 2021-07-22 16:23 薄荷加冰2060 阅读(1718) 评论(0) 推荐(0) 编辑
摘要: 转载:https://blog.csdn.net/lzhcoder/article/details/88387751 https://blog.csdn.net/lzhcoder/article/details/88387751 阅读全文
posted @ 2021-07-21 10:23 薄荷加冰2060 阅读(59) 评论(0) 推荐(0) 编辑
摘要: 需求 某分布式系统中,主节点可以有多台,可以动态上下线,任意一台客户端都能实时感知到主节点服务器的上下线。 设计 实现 public class DistributeServer { public static void main(String[] args) throws Exception { 阅读全文
posted @ 2021-07-20 19:47 薄荷加冰2060 阅读(42) 评论(0) 推荐(0) 编辑
摘要: 大数据特性 HDFS、YARN、MapReduce三者之间的关系 Hadoop是一个由Apache基金会所开发的分布式系统基础架构,主要解决,海量数据的存储和海量数据的分析计算问题。 海量数据的存储和海量数据的分析计算问题 大数据技术生态体系 推荐系统框架 HDFS读写数据流程 HDFS写数据流程 阅读全文
posted @ 2021-07-19 20:55 薄荷加冰2060 阅读(36) 评论(0) 推荐(0) 编辑
摘要: 关于Hive Hive简介 Hive:由 Facebook 开源用于解决海量结构化日志的数据统计工具。 Hive 是基于 Hadoop 的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并 提供类 SQL 查询功能。 Hive 本质:将 HQL 转化成 MapReduce 程序 (1)Hive 阅读全文
posted @ 2021-07-19 20:00 薄荷加冰2060 阅读(239) 评论(0) 推荐(0) 编辑
摘要: 官网介绍:宝塔面板是一款服务器管理软件,支持windows和linux系统,可以通过Web端轻松管理服务器,提升运维效率。例如:创建管理网站、FTP、数据库,拥有可视化文件管理器,可视化软件管理器,可视化CPU、内存、流量监控图表,计划任务等功能。参看:https://www.bt.cn/ 功能: 阅读全文
posted @ 2021-07-14 12:13 薄荷加冰2060 阅读(373) 评论(0) 推荐(0) 编辑
摘要: 遇到的问题及使用场景 对将要过期(倒计时10天)的优惠券使用用户进行发短信提醒,每天上午10点发一次,发短信的服务有3个实例,如果不进行处理,用户每天会受到3条相同的短信,既影响用户体验,又浪费短信资源,那该怎么处理呢,我现在使用的Spring自带的定时任务组件Scheduled,可能Elastic 阅读全文
posted @ 2021-07-13 17:41 薄荷加冰2060 阅读(543) 评论(0) 推荐(0) 编辑
摘要: 公钥加密,私钥解密,私钥签名,公钥验签 阅读全文
posted @ 2021-07-12 10:42 薄荷加冰2060 阅读(61) 评论(0) 推荐(0) 编辑
上一页 1 2 3 4 5 6 ··· 21 下一页