摘要:一、配置环境规划 ### vmware、linux版本 ~~~ vmware版本:VMware-workstation-full-15.5.5-16285975.exe ~~~ Linux版本:CentOS-7-x86_64-DVD-1810.iso ### Linux主机配置参数 ~~~ CPU:
阅读全文
摘要:一、什么是Hadoop ### Hadoop 是一个适合大数据的分布式存储和计算平台。 ~~~ 如前所述,狭义上说Hadoop就是一个框架平台, ~~~ 广义上讲Hadoop代表大数据的一个技术生态圈,包括很多其他软件框架 Hadoop生态圈技术栈 Hadoop(HDFS + MapReduce +
阅读全文
摘要:一、[大数据发展趋势及从业人员发展路线] ### 大数据发展趋势 ~~~ # 1、2015年党的十八届五中全会提出“实施国家大数据战略”, ~~~ 国务院印发《促进大数据发展行动纲要》,大数据技术和应用处于创新突破期, ~~~ 国内市场需求处于爆发期,我国大数据产业面临重要的发展机遇。 ~~~ #
阅读全文
摘要:附录一:报错处理一: ### 报错现象: [root@linux121 lib64]# hadoop checknative -a 21/08/12 22:00:29 INFO bzip2.Bzip2Factory: Successfully loaded & initialized native-
阅读全文
摘要:一、大数据解决的是什么问题 ### 大数据技术解决的是什么问题? ~~~ 大数据技术解决的主要是海量数据的存储和计算。 ### Hadoop的广义和狭义之分 ~~~ # 狭义的Hadoop:指的是一个框架,Hadoop是由三部分组成: ~~~ HDFS:分布式文件系统--》存储:MapReduce:
阅读全文
摘要:一、大数据的定义 ### 大数据定义 ~~~ 大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合, ~~~ 是需要新处理模式才能具有更强的决策力、 ~~~ 洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 二、大数据的特点 ### 大数据的特点 ~~~ 大数据的特
阅读全文
摘要:NO: Walter Savage Landor:strove with none,for none was worth my strife.Nature I loved and, next to Nature, Art:I warm'd both hands before the fire of
阅读全文