上一页 1 ··· 3 4 5 6 7 8 9 10 11 ··· 24 下一页
摘要: 首先,我们进行Hbase的部署 Zookeeper 正常部署 首先保证 Zookeeper 集群的正常部署,并启动之: [atguigu@hadoop102 zookeeper-3.4.10]$ bin/zkServer.sh start [atguigu@hadoop103 zookeeper-3 阅读全文
posted @ 2021-10-12 16:32 宋振兴 阅读(35) 评论(0) 推荐(0) 编辑
摘要: 今天咱们停下学习单纯的hadoop,又需要配置东西了。 开始hive,zookeeper,等东西的配置了 ,哎,配置最麻烦了。 阅读全文
posted @ 2021-10-11 16:18 宋振兴 阅读(25) 评论(0) 推荐(0) 编辑
摘要: 昨天两天写的都是读后感,但是呢,我的每日日报没有停下来,所以呢,今日把所有的都贴出来。 (2)编写 Mapper 类 package com.atguigu.mapreduce.writablecompable; import org.apache.hadoop.io.LongWritable; i 阅读全文
posted @ 2021-10-10 18:05 宋振兴 阅读(40) 评论(0) 推荐(0) 编辑
摘要: 团队如何进行交互,交流如何继续,这才是人月神话将要带给我们的,他所说的银弹是什么?交流和测验,这是我们应对项目的一个法宝。 看完整本书我看到作者一直再强调文档的重要性,他曾经很勤奋的向软件工程师们讲述文档的必要性以及优秀文档所具有的特点方面的讲座。但是效果都非常的的不好,他们知道如何来写出优秀的文档 阅读全文
posted @ 2021-10-09 16:03 宋振兴 阅读(37) 评论(0) 推荐(0) 编辑
摘要: 《人月神话》这本书风行已经很久了,写成于1975年,经历这么久的时间,又被老师提出来让我们去读一下,老师明明是那种追求新技术的人,这让我非常的好奇,但是一直没有时间读。直到最近,快开学了,才终于狠下心来把他看完。也不能说看完吧,一知半解的,看了看。觉得有一些疑惑,又去网上找来读后感读了读,虽然没有读 阅读全文
posted @ 2021-10-08 18:54 宋振兴 阅读(70) 评论(0) 推荐(0) 编辑
摘要: 今天是国庆的最后一天。 FlowBean 对象在在需求 1 基础上增加了比较功能 package com.atguigu.mapreduce.writablecompable; import org.apache.hadoop.io.WritableComparable; import java.i 阅读全文
posted @ 2021-10-07 20:35 宋振兴 阅读(32) 评论(0) 推荐(0) 编辑
摘要: 今天做一个hadoop的操作实例。可能会做三四天。 WritableComparable 排序案例实操(全排序) 1)需求 根据案例 2.3 序列化案例产生的结果再次对总流量进行倒序排序。 (1)输入数据 原始数据 第一次处理后的数据 phone_data .txt part-r-00000 ( 2 阅读全文
posted @ 2021-10-06 19:34 宋振兴 阅读(37) 评论(0) 推荐(0) 编辑
摘要: 今天学习mapreduce的排序。 排序是MapReduce框架中最重要的操作之一。 MapTask和ReduceTask均会对数据按 照key进行排序。该操作属于Hadoop的默认行为。任何应用程序中的数据均会被排序,而不管逻辑上是否需要。 默认排序是按照字典顺序排序,且实现该排序的方法是快速排序 阅读全文
posted @ 2021-10-05 15:22 宋振兴 阅读(20) 评论(0) 推荐(0) 编辑
摘要: 今日份偷懒结束,我学了一点点东西。 这是hadoop用来实例化的。 package com.atguigu.mapreduce.partitioner; import org.apache.hadoop.io.Text; import org.apache.hadoop.mapreduce.Part 阅读全文
posted @ 2021-10-04 15:18 宋振兴 阅读(31) 评论(0) 推荐(0) 编辑
摘要: 国庆节小小的躺了两天。很是快乐,但是接下来就是很多的任务了。大作业也要提上日程了。 大作业是进行数据字典生成,这玩意属实是比较难受的。 我不知道该怎么做,但是不用但心。我能会的。 阅读全文
posted @ 2021-10-03 22:56 宋振兴 阅读(68) 评论(0) 推荐(0) 编辑
上一页 1 ··· 3 4 5 6 7 8 9 10 11 ··· 24 下一页