2016年11月8日
大数据题目思路总结
摘要： 1）给一个超过100G大小的log file，log中存着IP地址，设计算法找到出现次数最多的IP地址？（与如何知道top K的IP，如何使用Linux系统命令实现） Hash分桶法： 将100G文件分成1000份，将每个IP地址映射到相应文件中：file_id = hash(ip) % 1000 阅读全文
posted @ 2016-11-08 12:37 请叫我小小兽 阅读(1118) 评论(0) 推荐(0) 编辑