摘要: # Hadoop完全分布式集群安装 >使用版本: hadoop-3.2.0 ## 安装VMware 看一下这张图,图里面表示是三个节点,左边这一个是主节点,右边的两个是从节点,hadoop集群是支持主从架构的。 不同节点上面启动的进程默认是不一样的。 ![](https://img2023.cnbl 阅读全文
posted @ 2023-08-05 21:30 与时代共同进步 阅读(11) 评论(0) 推荐(0) 编辑
摘要: # 文件路径:\和/和的区别: #### / Unix使用斜杆/ 作为路径分隔符,而web应用最新使用在Unix系统上面,所以目前所有的网络地址都采用 斜杆/ 作为分隔符。 #### \ Windows由于使用 斜杆/ 作为DOS命令提示符的参数标志了,为了不混淆,所以采用 反斜杠 作为路径分隔符。 阅读全文
posted @ 2023-08-05 20:57 与时代共同进步 阅读(97) 评论(0) 推荐(0) 编辑
摘要: # SecureCRT通过主机名连接异常 #### 环境 >shell工具: SecureCRT linux: Centos7 #### 问题描述 在SecureCRT与集群主机直接通过主机名建立连接的时报错,但直接通过ip建立连接时正常 #### 异常信息 Hostname lookup fail 阅读全文
posted @ 2023-08-05 20:53 与时代共同进步 阅读(908) 评论(0) 推荐(0) 编辑
摘要: >对于初学者来说,有些东西要一点点来,尤其是基础,不能着急,无论你是小白,还是大白,有一些基础也好,多看基础命令对你来说都会有帮助的 # 一 常用命令 ``` scala> :help All commands can be abbreviated, e.g., :he instead of :he 阅读全文
posted @ 2023-08-05 20:14 与时代共同进步 阅读(109) 评论(0) 推荐(0) 编辑
摘要: # 快速入门 通过 Spark 的交互式 shell 简单介绍一下 (Python 或 Scala) API,然后展示如何使用 Java、Scala 以及 Python 编写一个 Spark 应用程序。 >Spark 2.0 版本之前, Spark 的核心编程接口是弹性分布式数据集(RDD)。Spa 阅读全文
posted @ 2023-08-05 20:02 与时代共同进步 阅读(22) 评论(0) 推荐(0) 编辑
摘要: # 快速了解Flink ## 什么是Flink Apache Flink 是一个开源的分布式,高性能,高可用,准确的流处理框架。 分布式:表示flink程序可以运行在很多台机器上, 高性能:表示Flink处理性能比较高 高可用:表示flink的稳定性和可用性是比较好的。 准确的:表示flink可以保 阅读全文
posted @ 2023-08-05 09:02 与时代共同进步 阅读(6) 评论(0) 推荐(0) 编辑