摘要: | 组件 | 节点 | 默认端口 | 配置 | 用途说明 | | | | | | | | HDFS | DataNode | 50010 | dfs.datanode.address | datanode服务端口,用于数据传输 | | HDFS | DataNode | 50075 | dfs.da 阅读全文
posted @ 2020-04-29 22:07 呓语i 阅读(519) 评论(0) 推荐(0) 编辑
摘要: 设置JDK 设置ssh免密登录 安装配置 配置文件 slaves core site.xml hdfs site.xml mapred site.xml yarn site.xml 格式化namenode 启动dfs 查看启动状态 使用 或者在浏览器上输入node1:50070或者node1:808 阅读全文
posted @ 2020-04-29 22:04 呓语i 阅读(85) 评论(0) 推荐(0) 编辑
摘要: 简单使用 组成部分 触发器(tiggers):触发器是提供 的逻辑调度,并且每个 都有自己的 ,用于管理任务何时开始执行,除了在初始配置之外, 完全是无状态的。 作业存储(stores):主要包含的是 的调度任务。默认情况下, 会将任务存储在内存中,也可以将任务存储在数据库中,达到持久存储的效果,存 阅读全文
posted @ 2020-04-29 22:03 呓语i 阅读(280) 评论(0) 推荐(0) 编辑
摘要: Java8 函数式编程 在思考问题时,使用不可变值和函数,函数对一个值进行处理,映射成另一个值。 系统的功能应该更多的源自于程序之间的关系,而非程序本身。 lambda表达式 1. lambda 的几种形式 2. Lambda表达式是一个匿名方法,将行为像数据一样进行传递。 3. 函数接口指仅具有单 阅读全文
posted @ 2020-04-29 21:50 呓语i 阅读(162) 评论(0) 推荐(0) 编辑