随笔分类 -  大数据

摘要:Hadoop学习笔记Hadoop概念1.思想之源 HDFS分布式存储2.1 HDFS概念2.2 HDFS优点 HDFS缺点 HDFS架构 HDFS存储单元(block) HDFS设计思想 HDFS核心概念 1.NameNode概念 2.Seco... 阅读全文
posted @ 2019-01-02 08:25 墨小枫233 阅读(128) 评论(0) 推荐(0) 编辑
摘要:1 下载个windows版的hadoop配置bin目录HADOOP_PATH2 引入jar包hadoop/common里的common包lib里面所有的包3 构造客户端package hdfs24;import java.io.IOException;imp... 阅读全文
posted @ 2019-01-02 08:25 墨小枫233 阅读(575) 评论(0) 推荐(0) 编辑
摘要:1、什么是大数据基本概念《数据处理》在互联网技术发展到现今阶段,大量日常、工作等事务产生的数据都已经信息化,人类产生的数据量相比以前有了爆炸式的增长,以前的传统的数据处理技术已经无法胜任,需求催生技术,一套用来处理海量数据的软件工具应运而生,这就是大数据!处... 阅读全文
posted @ 2019-01-02 08:24 墨小枫233 阅读(291) 评论(0) 推荐(0) 编辑