摘要：
本地运行模式（官方WordCount） 1）创建在hadoop-3.1.3文件下面创建一个wcinput文件夹 [atguigu@hadoop102 hadoop-3.1.3]$ mkdir wcinput 2）在wcinput文件下创建一个word.txt文件 [atguigu@hadoop102 阅读全文
摘要：
Hadoop运行模式 1）Hadoop官方网站：http://hadoop.apache.org/ 2）Hadoop运行模式包括：本地模式、伪分布式模式以及完全分布式模式。 本地模式：单机运行，只是用来演示一下官方案例。生产环境不用。 伪分布式模式：也是单机运行，但是具备Hadoop集群的所有功能， 阅读全文
摘要：
Hadoop目录结构 1）查看Hadoop目录结构 [atguigu@hadoop102 hadoop-3.1.3]$ ll 总用量 52 drwxr-xr-x. 2 atguigu atguigu 4096 5月 22 2017 bin drwxr-xr-x. 3 atguigu atguigu 阅读全文
摘要：
第一章 软件工程介绍 软件是指令的集合；软件是数据结构；软件是程序操作和使用的文档；软件是逻辑的系统元素而非物理的系统元素。 软件具有的特性：（1）软件是设计开发的，而不是传统意义上生产制造的。（2）软件不会“磨损”但是软件会退化。（3）虽然整个工业向着基于构件的构造模式发展，然而大多数软件仍是根据 阅读全文
摘要：
在hadoop102安装Hadoop Hadoop下载地址：https://archive.apache.org/dist/hadoop/common/hadoop-3.1.3/ 1）用XShell文件传输工具将hadoop-3.1.3.tar.gz导入到opt目录下面的software文件夹下面 阅读全文
摘要：
部署流水线原则与工具设计Pipeline Architecture： 平台应该具有什么能力？ 可追溯能力对历史构建可重现的能力部署Pipeline的一次执行过程 Build Test 测试集群可能有unit test 集群， 功能测试集群，性能测试集群 ** 基础环境管理服务**构建管理测试管理部署 阅读全文
摘要：
在hadoop102安装JDK 1）卸载现有JDK 注意：安装JDK前，一定确保提前删除了虚拟机自带的JDK。详细步骤见问文档3.1节中卸载JDK步骤。 2）用XShell传输工具将JDK导入到opt目录下面的software文件夹下面 3）在Linux系统下的opt目录中查看软件包是否导入成功 [ 阅读全文
摘要：
克隆虚拟机 1）利用模板机hadoop100，克隆三台虚拟机：hadoop102 hadoop103 hadoop104 注意：克隆时，要先关闭hadoop100 2）修改克隆机IP，以下以hadoop102举例说明 （1）修改克隆虚拟机的静态IP [root@hadoop100 ~]# vim / 阅读全文
摘要：
业务需求协作管理Q & A产品全生命周期有哪些阶段？ 什么是技术债?短期内比较方便，但是长远看有消极影响的方案。需要恰当管理，比如代码重构等。 需求分析管理工具 user story mapuser story treeMSTR casesMSTR 把需求拆分为Features， Features下 阅读全文
摘要：
Hadoop运行环境搭建 模板虚拟机环境准备 0）安装模板虚拟机，IP地址192.168.10.100、主机名称hadoop100、内存4G、硬盘50G 1）hadoop100虚拟机配置要求如下（本文Linux系统全部以CentOS-7.5-x86-1804为例） （1）使用yum安装需要虚拟机可以 阅读全文