摘要: Word Count 程序运行流程解析 && MapReduce 程序运行流程解析 阅读全文
posted @ 2018-11-08 22:18 山间一棵松 阅读(162) 评论(0) 推荐(0) 编辑
摘要: 数据倾斜及解决方法的介绍与代码实现 阅读全文
posted @ 2018-11-07 23:55 山间一棵松 阅读(185) 评论(0) 推荐(0) 编辑
摘要: 设置分区数量 && 编写自定义分区代码 阅读全文
posted @ 2018-11-06 11:44 山间一棵松 阅读(804) 评论(0) 推荐(0) 编辑
摘要: 介绍 && Map 个数 & Reduce 个数指定 && Map 切片计算 阅读全文
posted @ 2018-11-06 10:37 山间一棵松 阅读(864) 评论(0) 推荐(0) 编辑
摘要: Combiner 介绍 && 在 MapReduce 中的应用 阅读全文
posted @ 2018-11-05 23:50 山间一棵松 阅读(232) 评论(0) 推荐(0) 编辑
摘要: 制作一款属于自己的水印 阅读全文
posted @ 2018-11-05 17:30 山间一棵松 阅读(479) 评论(1) 推荐(1) 编辑
摘要: 编写 MapReduce 程序实现年度最高气温统计 阅读全文
posted @ 2018-11-05 14:56 山间一棵松 阅读(871) 评论(0) 推荐(0) 编辑
摘要: MapReduce 实现 Word Count 示意图 && Word Count 代码编写 阅读全文
posted @ 2018-11-05 14:06 山间一棵松 阅读(396) 评论(0) 推荐(0) 编辑
摘要: Windows 下开发 MapReduce 程序部署到集群 阅读全文
posted @ 2018-11-05 10:58 山间一棵松 阅读(221) 评论(0) 推荐(0) 编辑
摘要: Hadoop 随笔的目录 阅读全文
posted @ 2018-11-04 11:55 山间一棵松 阅读(183) 评论(0) 推荐(0) 编辑
摘要: HDFS 副本存放策略 && 配置机架感知 阅读全文
posted @ 2018-11-04 11:45 山间一棵松 阅读(220) 评论(0) 推荐(0) 编辑
摘要: 0. 说明 有时候我们从网上下载一些技术文章的配图时,在遇到一些模糊的流程图或架构图的时候真的很无解,有些图片被多次下载然后又上传,加上上传本身对图片质量的压缩,所以在想找一个能提高图片质量的工具,这里的图片是指一些自绘的流程图之类的图。 在网上找到了一个挺好的网页,可以将图片适量放大和优化显示效果 阅读全文
posted @ 2018-11-03 16:55 山间一棵松 阅读(2178) 评论(0) 推荐(0) 编辑
摘要: HDFS 初始化文件系统分析 && HDFS 文件写入流程 && HDFS 文件读取流程分析 阅读全文
posted @ 2018-11-03 15:44 山间一棵松 阅读(211) 评论(0) 推荐(0) 编辑
摘要: SequenceFile 配置压缩编解码器 && 压缩类型的选型 阅读全文
posted @ 2018-11-02 15:35 山间一棵松 阅读(240) 评论(0) 推荐(0) 编辑
摘要: Hadoop 压缩介绍 && 压缩格式总结 && 压缩编解码器测试 阅读全文
posted @ 2018-11-02 10:35 山间一棵松 阅读(238) 评论(0) 推荐(0) 编辑
摘要: MapFile 介绍 && 测试 阅读全文
posted @ 2018-11-01 17:18 山间一棵松 阅读(165) 评论(0) 推荐(0) 编辑
摘要: 测试序列文件的读写操作 && 测试序列文件的排序操作 && 测试序列文件的合并操作 && 测试序列文件的压缩方式 && 测试将日志文件转换成序列文件 阅读全文
posted @ 2018-11-01 10:42 山间一棵松 阅读(931) 评论(0) 推荐(0) 编辑
摘要: Shell 脚本合集 阅读全文
posted @ 2018-10-31 17:41 山间一棵松 阅读(400) 评论(0) 推荐(0) 编辑
摘要: SecondaryNameNode 滚动 NameNode 数据流程 阅读全文
posted @ 2018-10-31 15:24 山间一棵松 阅读(157) 评论(0) 推荐(0) 编辑
摘要: HDFS 文件概念 && HDFS 启动过程分析 阅读全文
posted @ 2018-10-30 16:17 山间一棵松 阅读(341) 评论(0) 推荐(0) 编辑
摘要: Hadoop 命令合集 && Web UI 阅读全文
posted @ 2018-10-30 10:53 山间一棵松 阅读(1995) 评论(0) 推荐(0) 编辑
摘要: 在 IDEA下 进行 HDFS 的 Java 应用开发 通过编写代码实现对 HDFS 的读写操作 阅读全文
posted @ 2018-10-30 10:28 山间一棵松 阅读(413) 评论(0) 推荐(0) 编辑
摘要: 在 IDEA 中运行 Hadoop 程序 报 winutils.exe 不存在错误解决方案 阅读全文
posted @ 2018-10-29 22:22 山间一棵松 阅读(5628) 评论(0) 推荐(0) 编辑
摘要: Vim 文档加密 & 解密 阅读全文
posted @ 2018-10-29 21:46 山间一棵松 阅读(261) 评论(0) 推荐(0) 编辑
摘要: Maven 的介绍 && 安装配置 阅读全文
posted @ 2018-10-29 17:30 山间一棵松 阅读(122) 评论(0) 推荐(0) 编辑