摘要: 最近在学习大数据的一些知识,了解到了MapReduce的用处,下面我先讲解一下MapReduce的作用。 MapReduce其实是分为两种:一是map,而是reduce,MapReduce是Hadoop的重要组件,是分布式计算的框架,是一种编程模型,下面我从wordcount这个算法来解析一下到底什 阅读全文
posted @ 2018-07-18 16:10 大神笨蛋 阅读(972) 评论(0) 推荐(0) 编辑
摘要: 这几天在学大数据的相关技术,老师给了我们一个含有10000条记录的用户浏览日志,日志里面每一行代表一条记录,没条记录包含用户 IP,使用的浏览器,浏览的世界,使用的客户端等等信息,下面是日志的截图。 我们需要做的就是将用户使用的浏览器统计出来,并且统计出来浏览器使用数量。 那么我们需要做的就是将每条 阅读全文
posted @ 2018-07-18 14:20 大神笨蛋 阅读(865) 评论(0) 推荐(0) 编辑
摘要: 最近在IDEA中创建项目,进行大数据数据的统计时,运行报错,包如下的错误: 这个错误可能有两种原因: 1. 该项目中没有这个方法 2. 导入的jar包冲突 我们先看看这个错误 org.slf4j.impl.StaticLoggerBinder.getSingleton()Lorg/slf4j/imp 阅读全文
posted @ 2018-07-18 13:16 大神笨蛋 阅读(946) 评论(0) 推荐(0) 编辑