摘要：
1. 阐述Hadoop生态系统中，HDFS, MapReduce, Yarn, Hbase及Spark的相互关系，为什么要引入Yarn和Spark。 HDFS 作为Hadoop生态系统在最底层，用于实现文件存储，提供海量数据存储，是MapReduce, Yarn, Hbase及Spark的基础； M 阅读全文
摘要：
操作过程 2.1 数据准备 A.1sudo mkdir usr/local/bigdatacase A.2sudo chown -R hadoop:hadoop ./bigdatacase A.3mkdir usr/local/bigdatacase/dataset A.4 A.5 B.1sed - 阅读全文
摘要：
使用sqoop进行将Hive 词频统计的结果数据传输到Mysql中。 1.mysql准备接受数据的数据库与表 命令如下： 创建使用数据库dblab，创建wxj表： 结果： 2. hive准备待传输的数据 命令如下： 使用hive数据库，进行表wxj的建立： 结果： 3.sqoop进行数据传输 命令如 阅读全文
摘要：
一、hive用本地文件进行词频统计 1.准备本地txt文件 2.启动hadoop，启动hive 3.创建数据库，创建文本表 4.映射本地文件的数据到文本表中 5.hql语句进行词频统计交将结果保存到结果表中。 6.查看统计结果 二、hive用HDFS上的文件进行词频统计 1.准备电子书或其它大的文本 阅读全文
摘要：
1.列出HBase所有的表的相关信息，例如表名； 2.在终端打印出指定的表的所有记录数据； 3.向已经创建好的表添加和删除指定的列族或列； 添加： 删除： 4.统计表的行数： 5.清空指定的表的所有记录数据； 指定表： 2.关系型数据库中的表和数据（教材P92上)，要求将其转换为适合于HBase存储 阅读全文
摘要：
下载喜欢的电子书或大量文本数据，并保存在本地文本文件中 编写map与reduce函数 本地测试map与reduce 将文本数据上传至HDFS上 用hadoop streaming提交任务 查看运行结果 计算结果取回到本地 气象数据分析 如：求每日最高温度 批量下载气象数据 解压数据集，并保存在本地文 阅读全文
摘要：
本地文件系统创建一个文件，输入带姓名学号信息。 查看新建文件所在目录 查看新建文件内容 将此文件上传到HDFS文件系统上的用户目录 HDFS上查看相应目录 HDFS上查看文件内容 HDFS上查看文件大小 删除本地1步骤创建的文件 将HDFS上的文件下载到本地 查看本地文件目录 阅读全文
摘要：
1.用自己的图，描述HDFS体系结构、工作原理与流程。 阅读全文
摘要：
1.熟悉Linux常用命令： 2.在Ubuntu下安装MySQL及其常用操作 姓名：吴炫京 学号：201806120050 阅读全文
摘要：
Q1:了解对比Hadoop不同版本的特性，可以用图表的形式呈现。 A: Q2:Hadoop生态的组成、每个组件的作用、组件之间的相互关系，以图例加文字描述呈现。 A: HBase™：可扩展的分布式数据库，支持大型表的结构化数据存储。 Hive™：一种数据仓库基础结构，可提供数据汇总和即席查询。 Zo 阅读全文