随笔 - 14,  文章 - 1,  评论 - 0,  阅读 - 274
摘要: 分布式系统 谷歌三剑客 Distributed File System(Google FIle System) 如何有效存储数据? Nosql底层需要一个文件系统 Bigtable = Nosql database 怎么链接底层存储和上层数据 Map Reduce 怎么快速处理数据 GFS C++ 阅读全文
posted @ 2024-02-27 12:46 dddddcoke 阅读(11) 评论(0) 推荐(0) 编辑
摘要: 大数据职位 分布式数据处理框架 count the word frequency of a web page? for循环,存在hashmap 缺点:只有一台机器, 慢,内存大小受限。 多台机器,并行处理 合并的时候是瓶颈。 map把任务打散,reduce把任务合并 step1 input 输入 0 阅读全文
posted @ 2024-02-27 05:31 dddddcoke 阅读(6) 评论(0) 推荐(0) 编辑

< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5
点击右上角即可分享
微信分享提示