摘要:
(1)本周学习MapReduce中的排序和分组总结: 本周我花了20小时学习Hadoop中MapReduce中的排序和分组操作。在Hadoop默认的排序算法中,只会针对key值进行排序。在Hadoop中的默认分组规则中,也是基于Key进行的,会将相同key的value放到一个集合中去 在学习阶段,我 阅读全文
摘要:
本周学习Combiner总结: 在MapReduce编程模型中,在Mapper和Reducer之间有一个非常重要的组件,它解决了上述的性能瓶颈问题,它就是Combiner 本周我花了15小时学习Hadoop中的Combiner的使用。 在学习阶段,我用了8小时来阅读相关文档和教程,了解Combine 阅读全文
摘要:
(1)本周学习自定义类型处理手机上网日志总结: 本周我花了20小时学习如何在Hadoop中处理手机上网日志并创建自定义数据类型。学会如何通过map-reduce实现统计不同手机号用户的上网流量信息?通过上表可知,第6~9个字段是关于流量的信息,也就是说我们需要为每个用户统计其upPackNum、do 阅读全文
摘要:
(1)本周学习MapReduce总结: 本周我花了25小时学习MapReduce相关知识。 在学习阶段,我用了15小时来阅读有关MapReduce的文档,了解其概念、工作原理以及Hadoop中的实现方式。 我还花了7小时编写和测试与MapReduce相关的代码,主要是使用Java编写一些MapRed 阅读全文
摘要:
《天道》里面有很多关于高人思维方式的东西,揭示的智慧很多,充满了浓浓的的哲学文化意味,都值得反复品味,仔细推敲,看过的人无一不被其中的思想所震撼。是创业奇才、商业精英必看的经典之作。电视剧取名《天道》意境高远:天之道,损有余而补不足;人之道,损不足以奉有余。作者对强势文化的呼喊,就像当年鲁迅先生给自 阅读全文
摘要:
(1)本周学习RPC总结: 本周我花了20小时学习Hadoop中的RPC。 在学习阶段,我用了12小时来阅读有关RPC的文档,了解其概念、原理和Hadoop中的实现方式。 我还花了6小时编写和测试与RPC相关的代码,主要是使用Java编写一些RPC客户端和服务器的示例程序。 (1)RPC采用了C/S 阅读全文
摘要:
(1)本周学习HDFS总结: 本周我花了15小时学习HDFS相关知识。 在学习阶段,我用了8小时来阅读HDFS的文档,了解其基本概念、架构和工作原理。 我还花了4小时编写和测试与HDFS相关的代码,主要是用Java编写一些HDFS操作的示例程序。 在解决问题方面,我花了3小时来处理在学习和编码过程中 阅读全文
摘要:
(1)本周安装Hadoop总结: 本周我花了20小时来学习和安装Hadoop。 学习阶段占用了10小时,我主要关注Hadoop的安装和配置文档,以了解所需的步骤和概念。 安装和配置Hadoop集群花费了5小时,包括设置各个节点以及Hadoop环境的调优。 在解决问题方面,我花了5小时来应对在安装和配 阅读全文
摘要:
一、#include <iostream>标红 首先,你没有编译器了,别捅咕了直接去安装一个MinGW参考:MinGW下载和安装教程 (biancheng.net) 二、漫长的安装之后,还是不能用,需要配置, 参考:(43条消息) vscode检测到#include错误,请更新includePath 阅读全文