zhaoxinhui

摘要： 能执行这个本地grep官方案例，就说明hadoop的本地环境已经配置好了 首先在hadoop-3.3.0文件夹下建立一个input文件夹，切换到hadoop-3.3.0的目录下，然后执行： bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce- 阅读全文

摘要： 1、hadoop的运行模式包括：本地模式、伪分布式模式、完全分布式模式 本地模式就是数据存储咋Linux本地，测试偶尔用一下， 伪分布式模式就是数据存储在hdfs上，一般学习用， 完全分布式模式数据也是存储在hdfs上，多台服务器工作，一般在企业中使用 阅读全文

摘要： 1、etc里都是配置文件 2、sbin 里都是hadoop启动停止和集群启动停止的命令 在配置集群的时候需要使用 整个集群全部启动 启动集群的hdfs 启动yarn 3、share存放说明文档 4、bin 存放hadoop和hdfs 阅读全文

摘要： 一、大数据技术生态体系 二、虚拟机环境准备 1、克隆虚拟机 在虚拟机上右键-管理-克隆 一般的可以把一个虚拟机的环境或者需要的东西都配置好，然后克隆几个，在克隆的虚拟机上进行操作，这样出现了什么问题不至于重新开始配置环境。 2、修改ip地址 尤其对于克隆的虚拟机一定要修改ip地址 对于centos8 阅读全文

摘要： 就是这里显示已经连接， 但是ping: www.baidu.com: 未知的名称或服务 在修改之前的配置文件之后，重启网络服务，如何还是这样，可以输入： nmcli c up ens33 把我ens33这个设备的连接激活nmcli d reapply ens33 把设备的变更更新到当前的激活连接状态 阅读全文

摘要： 一、hadoop是一个分布式系统基础架构。分布式解决海量数据的存储和分析计算。大部分框架都依赖于hadoop。 三篇论文需要了解。 二、hadoop的优势 1、高可靠性：hadoop底层维护多个数据副本，所以即使hadoop某个计算元素或存储出现故障们都不会导致数据的丢失。 2、高扩展性：在集群间分 阅读全文

摘要： 是在图形平面上，有多个节点的路径，求出最低通过成本的算法。这个算法搜索最优路径是通过一个一个估值函数：f(n)=g(n)+h(n) 。 g(n)，它表示从起始搜索点到当前点的代价（通常用某结点在搜索树中的深度来表示）。就是从初始状态到状态n的代价。 h(n)，即当前结点到目标结点的估值。就是从状态n 阅读全文

摘要： 这些面试题是尚硅谷的教学视频中有的，具体讲解可以去b站看尚硅谷。 -r是递归的意思。 阅读全文

摘要： 一、cut 切割cut.txt的第一列 切割cut.txt的第二、三列 从cut.txt中切割出guan 先是用cut获取cut.txt的内容，然后使用管道符交给grep,获取guan这一行，然后再使用管道符获取第一列。 选取系统PATH变量值，第2个“：”开始后的所有路径： 这就表示先获取到系统变 阅读全文

摘要： 一、系统函数 1、basename 2、dirname 二、自定义函数 必须在调用函数之前先声明函数。函数返回值只能通过$?系统变量获得，可以显示加:return返回，如果不加，将以最后一条命令运行结果，作为返回值。return后跟数值n(0-255) 计算两个输入参数的和： 最后一行是调用sum的 阅读全文