摘要:
第一天:1、答疑解惑• 就业前景• 学习hadoop要有什么基础• hadoop会像塞班一样,热一阵子吗• hadoop学习起来容易还是困难• 课堂上的学习方法(所有实验必须按照要求做,重原理、重实践)• 通过本课程能学到什么2、 课程简介• 以真实的电信详单分析程序为主线,讲解Hadoop,Hba... 阅读全文
摘要:
1、namenode –format:格式化DFS文件系统2、secondaryNameNode:运行DFS的SecondaryNameNode进程 hadoop secondarynamenode [-checkpoint [force]] //当EditLog超过规定大小(默认64MB)时... 阅读全文
摘要:
HDFS简介:当数据集的大小超过一台独立物理计算机的存储能力时,就有必要对它进行分区(partition)并存储到若干台单独的计算机上。管理网络中跨多台计算机存储的文件系统成为分布式文件系统(Distributed filesystem)。该系统架构于网络之上,势必会引入网络编程的复杂性,因此分布式... 阅读全文
摘要:
Hadoop的介绍: Hadoop是一个适用于大数据的并行存储和计算的平台,是Apache的一个用java语言实现开源软件框架,实现了在大量计算机组成的集群中对海量数据进行分布式计算。Hadoop框架的核心组成是HDFS和MapReduce,HDFS实现存储,而MapReduce实现数据分析与处理... 阅读全文
摘要:
前段日子为了赶专业实践,做一个云盘系统,把学习的时间和写博客的时间都弄掉了,坚持了半个月又没能坚持下来,这确实不怎么好,如果以后为了应对工作上的事情,是不是也会把锻炼的时间、陪家人的时间和充电提升自己的时间也给挤掉呢?这是个问题,大大的问题。 前段日子看到一个以后正式工作后会接触到的女神级人物... 阅读全文