2018年8月19日
Kafka入门之生产者消费者
摘要： 一、Kafka安装与使用 （ kafka介绍 ） 1. 下载Kafka 官网 http://kafka.apache.org/ 以及各个版本的下载地址 http://archive.apache.org/dist/kafka/ 2. 安装 Kafka是使用scala编写的运行与jvm虚拟机上的程序， 阅读全文
posted @ 2018-08-19 21:52 秦时明月0515 阅读(6058) 评论(0) 推荐(0) 编辑
Java编程环境eclipse配置
摘要： 一、 下载并安装JDK https://www.cnblogs.com/zhangchao0515/p/6806408.html 二、下载并解压Eclipse https://www.cnblogs.com/zhangchao0515/p/6806408.html 三、配置Eclipse 1. ec 阅读全文
posted @ 2018-08-19 13:42 秦时明月0515 阅读(244) 评论(0) 推荐(0) 编辑
2018年8月18日
Eclipse打Jar包的方法
摘要： Eclipse将引用了第三方jar包的Java项目打包成jar文件的两种方法 Eclipse打包成jar文件的两种方法 关于引用第三方jar包，生成自己jar包运行时找不到第三方jar包的解决方案 一，不包含其他额外的Jar包（我这里没指定默认运行主类，可以指定） 1. Eclipse项目打成Jar 阅读全文
posted @ 2018-08-18 19:25 秦时明月0515 阅读(26359) 评论(1) 推荐(0) 编辑
2018年8月10日
web开发并部署到Tomcat上
摘要： 1. eclipse配置tomcat https://jingyan.baidu.com/article/e4d08ffdabb0710fd2f60de9.html https://blog.csdn.net/bnna8356586/article/details/51218950 2.eclips 阅读全文
posted @ 2018-08-10 20:53 秦时明月0515 阅读(176) 评论(0) 推荐(0) 编辑
2018年2月8日
Hadoop2 使用 YARN 运行 MapReduce 的过程源码分析
摘要： Hadoop 使用 YARN 运行 MapReduce 的过程如下图所示: 总共分为11步. 这里以 WordCount 为例, 我们在客户端终端提交作业: 第一步: run job ( 运行作业 ) 这一步是在 Client 内部进行, hadoop jar .... 是通过 RunJar 运行的 阅读全文
posted @ 2018-02-08 11:33 秦时明月0515 阅读(249) 评论(0) 推荐(0) 编辑
2018年2月6日
ubuntu系统下挂载新的硬盘
摘要： 参考 http://zwkufo.blog.163.com/blog/static/258825120141283942244/ http://blog.csdn.net/caicai2526/article/details/77734280 阅读全文
posted @ 2018-02-06 11:47 秦时明月0515 阅读(132) 评论(0) 推荐(0) 编辑
2018年1月25日
HDFS源码分析四-HDFS Client
摘要： 4. HDFS Client ( 未完待续 ) 目录: 4.1 认识 DFSClient ( 未完待续 ) 4.2 输入流 ( 未完待续 ) 4.3 输出流 ( 未完待续 ) 4.4 DistributedFileSystem 的实现 ( 未完待续 ) 4.5 HDFS 常用工具 ( 未完待续 ) 阅读全文
posted @ 2018-01-25 12:07 秦时明月0515 阅读(1478) 评论(0) 推荐(0) 编辑
HDFS源码分析三-DataNode实现
摘要： 3. DataNode 实现( 未完待续 ) 阅读全文
posted @ 2018-01-25 12:04 秦时明月0515 阅读(138) 评论(0) 推荐(0) 编辑
HDFS源码分析二-NameNode实现
摘要： 2. NameNode 实现( 未完待续 ) 阅读全文
posted @ 2018-01-25 12:03 秦时明月0515 阅读(170) 评论(0) 推荐(0) 编辑
HDFS源码分析一-概述
摘要： HDFS 主要包含 NameNode, SecondaryNameNode, DataNode 以及 HDFS Client . 我们从以下这几部分讲： 1. HDFS概述 2. NameNode 实现 3. DataNode 实现 4. HDFS Client 我们这里先讲 HDFS 概述: 1. 阅读全文
posted @ 2018-01-25 10:43 秦时明月0515 阅读(272) 评论(0) 推荐(0) 编辑