随笔分类 - 大数据
摘要:Hadoop学习笔记Hadoop概念1.思想之源 HDFS分布式存储2.1 HDFS概念2.2 HDFS优点 HDFS缺点 HDFS架构 HDFS存储单元(block) HDFS设计思想 HDFS核心概念 1.NameNode概念 2.Seco...
阅读全文
摘要:1 下载个windows版的hadoop配置bin目录HADOOP_PATH2 引入jar包hadoop/common里的common包lib里面所有的包3 构造客户端package hdfs24;import java.io.IOException;imp...
阅读全文
摘要:1、什么是大数据基本概念《数据处理》在互联网技术发展到现今阶段,大量日常、工作等事务产生的数据都已经信息化,人类产生的数据量相比以前有了爆炸式的增长,以前的传统的数据处理技术已经无法胜任,需求催生技术,一套用来处理海量数据的软件工具应运而生,这就是大数据!处...
阅读全文