2020年2月21日
知识文档汇总
摘要： python中的lambda表达式：https://blog.csdn.net/zjuxsl/article/details/79437563 python中没有reduce的问题：https://blog.csdn.net/zjuxsl/article/details/79437563 eclip 阅读全文
posted @ 2020-02-21 20:27 一大碗小米粥 阅读(125) 评论(0) 推荐(0) 编辑
hadoop全分布式集群搭建（4台虚拟机）
摘要： HA高可用搭建框图 YARN mr 2.x ResourceManager ：只资源管理 AppMstr 任务调度：询问ResourceManager之后先创建容器container，开辟maptask和reducetask。 NodeManager：向RM汇报资源信息。 RM也需要HA（高可用）： 阅读全文
posted @ 2020-02-21 15:29 一大碗小米粥 阅读(589) 评论(0) 推荐(0) 编辑
linux操作（持续更新）
摘要： 1、chown 将指定文件的拥有者改为指定的用户或组。 例子 //将test.txt的拥有者改为fxw，组为fxwgroup eg. chown fxw:fxwgroup test.txt 2、shell脚本开头：#!/bin/bash 阅读全文
posted @ 2020-02-21 14:42 一大碗小米粥 阅读(149) 评论(0) 推荐(0) 编辑