随笔分类 - 大数据
摘要：今日任务 在hadoop里面安装JDK和Hadoop 分别配置他们两个的环境变量 在自己创建的my_env.sh文件中(环境变量文件) 其中 #是注释。
阅读全文
摘要：今天完成的任务 完成了虚拟机的克隆 配置克隆虚拟机的ip地址和主机名称 配置Xshell 继续安装JDK，在102上安装JDK，然后将其拷贝
阅读全文
摘要：今天继续安装， 安装了epel-release , 此软件相当于一个软件仓库。 关闭Linunx系统的防火墙 给用户配置root权限 在/opt目录下创建文件夹，并修改所属主和所属组。 卸载虚拟机安装的JDK 重启虚拟机 其中的一些Linux的命令，感觉有些熟悉，却不知道是什么意思，只能按照教程一步
阅读全文
摘要：今天进行了Xshell的安装和配置，Xshell可以在Windows界面下用来访问远端不同系统下的服务器，从而比较好的达到远程控制终端的目的。 遇见的问题： 解决办法：当链接的时候，需要把虚拟机打开。 顺便把Xftp安装了下来
阅读全文
摘要：今天进行了Centos的安装，首先下载VMware,Centos镜像下载及安装教程可以参考博客：https://blog.csdn.net/SDAU_LGX/article/details/120669344 安装完成后 然后又去配置IP地址，主机名称，配置完成后测试通过，今天的任务结束，还需要去下
阅读全文
摘要：HDFS 是分布式文件系统 NameNode(nn):存储文件的元数据，如文件名、文件目录结构、文件属性(生成时间、副本数、文件权限)，以及每个文件的块列表和块所在的DataNode等。 DataNode(dn):在本地文件系统存储文件块系统，以及块数据的校验和。 Secondary NameNod
阅读全文
摘要：今天开始学习Hadoop。 Hadoop主要应用于大数据。 概念：Hadoop是分布式系统基础架构，主要解决海量数据的存储和海量数据的分析计算问题。 Hadoop通常指Hadoop生态圈，通常指多门技术。 优势：高可靠性，高扩展性，高效性， 高容错性 Hadoop3.x的组成 学习方式：B站博主 h
阅读全文
