摘要：先存两个包在电脑上， apache-hive-1.2.1-bin.tar 链接：https://pan.baidu.com/s/19koILx8FCa2D65vbK5lIaw 提取码：1kqz mysql-connector-java-5.1.40.tar 链接：https://pan.baidu.
阅读全文
随笔分类 - 作业
摘要：WordCount程序任务： 程序 WordCount 输入 一个包含大量单词的文本文件 输出 文件中每个单词及其出现次数（频数）， 并按照单词字母顺序排序， 每个单词和其频数占一行，单词和频数之间有间隔 1.用你最熟悉的编程环境，编写非分布式的词频统计程序。 读文件 分词（text.split列表
阅读全文
摘要：1.理解HBase表模型及四维坐标：行键、列族、列限定符和时间戳。 行键：由一个RowKey和多个列族组成，一个行有一个RowKey，用来唯一标示。 列族：每一行由若干列族组成，每个列族下可包含多个列，如上ImployeeBasicInfoCLF和DetailInfoCLF即是两个列族。列族是列共性
阅读全文
摘要：1.下载压缩文件 将hbase文件放至vbox共享文件夹D:/share，打开Ubuntu虚拟机，在终端窗口输入命令sudo mount -t vboxsf share /mnt/bdshare，即可挂载文件夹实现共享，打开/mnt/bdshare，可见已有hbase压缩包 2.解压 进入/mnt/
阅读全文
摘要：一、在Ubuntu系统中安装和配置Eclipse 二、利用hadoop 的java api，向HDFS写一个文件。写入内容含自己的姓名学号信息。 三、从HDFS读取一个文件的内容并显示。
阅读全文
摘要：1.用图与自己的话，简要描述Hadoop起源与发展阶段。 从与谷歌系统的关系，关键时间节点，1.x,2.x与3.x的区别，不同公司发行版本等方面来讲。 Hadoop起源于Nutch，是Lucene的子项目。以谷歌发表的为解决数十亿网页的存储和索引问题提供了可行的解决方案的论文为基础，Nutch的开发
阅读全文
摘要：（一）熟悉常用的Linux操作 请按要求上机实践如下linux基本命令。 cd命令：切换目录 （1）切换到目录 /usr/local :~$ cd /usr/local （2）去到目前的上层目录 :/usr/local$ cd .. （3）回到自己的主文件夹 :/usr$ cd ~ ls命令：查看文
阅读全文
摘要：1.为什么产生大数据技术？ 随着互联网时代的发展以及人们生活方方面面的交流需求，每天的信息和数据产量膨胀式增长，以往的技术已不能满足当下发展的要求，大数据技术应运而生。 2.为什么要学习大数据技术？ （1）大数据的特点奠定了他的地位：①数据类型繁多②处理速度快③价值密度低 （2）大数据对科学研究产生
阅读全文
