摘要: 目录(?)[-] 一软件环境 二创建maven工程 三添加maven依赖 四配置log4j 五启动Hadoop 六运行WordCount从本地读取文件 七运行WordCount从HDFS读取文件 八代码下载 目录(?)[-] 介绍如何在Intellij Idea中通过创建maven工程配置MapRe 阅读全文
posted @ 2017-05-09 23:32 Jonson Li 阅读(2350) 评论(0) 推荐(0) 编辑
摘要: 转载地址:http://blog.csdn.net/napoay/article/details/54136398 目录(?)[+] 转载地址:http://blog.csdn.net/napoay/article/details/54136398 目录(?)[+] 一、机器环境 系统:MAC OS 阅读全文
posted @ 2017-05-09 23:28 Jonson Li 阅读(1529) 评论(0) 推荐(0) 编辑
摘要: 开始聊MapReduce,MapReduce是Hadoop的计算框架,我学Hadoop是从Hive开始入手,再到hdfs,当我学习hdfs时候,就感觉到hdfs和mapreduce关系的紧密。这个可能是我做技术研究的思路有关,我开始学习某一套技术总是想着这套技术到底能干什么,只有当我真正理解了这套技 阅读全文
posted @ 2017-05-09 12:12 Jonson Li 阅读(995) 评论(1) 推荐(0) 编辑
摘要: Systemctl是一个systemd工具,主要负责控制systemd系统和服务管理器。 Systemd是一个系统管理守护进程、工具和库的集合,用于取代System V初始进程。Systemd的功能是用于集中管理和配置类UNIX系统。 在Linux生态系统中,Systemd被部署到了大多数的标准Li 阅读全文
posted @ 2017-05-09 08:35 Jonson Li 阅读(433) 评论(0) 推荐(0) 编辑
摘要: 简介 HDFS(Hadoop Distributed File System )Hadoop分布式文件系统。是根据google发表的论文翻版的。论文为GFS(Google File System)Google 文件系统(中文,英文)。 HDFS有很多特点: ① 保存多个副本,且提供容错机制,副本丢失 阅读全文
posted @ 2017-05-09 00:27 Jonson Li 阅读(531) 评论(0) 推荐(0) 编辑