高并发系列---【百亿级流水数据的毫秒级查询与存储】
摘要:1.问题 系统的并发比较高,时间久了随之而来的海量数据存储的问题就会日益矛盾,所以,这篇文章来聊一聊海量数据存储与查询的问题。 2.设计方案 注意:如果流水数据量过大,建议流水数据的HBase和Es都单独再部署一套。实践中发现,Hbase有写入瓶颈,我们内存块中如果设置了100M刷新一次,持久化到磁
阅读全文
posted @ 2024-12-12 14:27