导航

• 博客园
• 首页
• 新随笔
• 新文章
• 联系
• 管理

随笔分类 -  大数据

• hdfs
  摘要：hadoop 删除文件流程 当通过cli执行删除文件操作时，具体namenode与datanode工作详解如下： namenode端： 1.cli提交 删除文件 command； 2.FileSystem会调用具体delete操作； 3.delete操作会由DFSClient通过RPC将delete 阅读全文
  posted @ 2022-08-08 09:18 大醉和尚 阅读(89) 评论(0) 推荐(0) 编辑
• yarn
  摘要：cat /etc/hadoop/3.1.4.0-315/0/fair-scheduler.xml fair-scheduler.xml <?xml version="1.0"?> <allocations> <userMaxAppsDefault>20</userMaxAppsDefault> <q 阅读全文
  posted @ 2021-11-26 13:45 大醉和尚 阅读(13) 评论(0) 推荐(0) 编辑
• hive
  摘要：spark 连接 hive 把hive-site.xml复制到spark conf下，文件所属spark:spark /usr/bin/cp -f /usr/hdp/3.1.4.0-315/hive/conf/hive-site.xml /etc/spark2/conf/ hive sql http 阅读全文
  posted @ 2021-09-28 14:38 大醉和尚 阅读(20) 评论(0) 推荐(0) 编辑
• atlas
  摘要：pom build <dependency> <groupId>org.apache.atlas</groupId> <artifactId>atlas-buildtools</artifactId> <version>0.8.1</version> </dependency> 替换为elastic 阅读全文
  posted @ 2021-09-22 20:27 大醉和尚 阅读(40) 评论(0) 推荐(0) 编辑
• ambari
  摘要：找资源 hdp3.1.6 https://docs.cloudera.com/HDPDocuments/HDPforCloud/HDPforCloud-3.1/hdp-release-notes/content/relnotes.html #安装ambari 2.7.5 参考： 文档：https:/ 阅读全文
  posted @ 2021-02-09 11:30 大醉和尚 阅读(101) 评论(0) 推荐(0) 编辑
• olap
  摘要：doris docker run -it -v /your/local/path/incubator-doris/:/root/incubator-doris/ hpg009/doris:v20201202a 阅读全文
  posted @ 2020-12-03 09:06 大醉和尚 阅读(117) 评论(0) 推荐(0) 编辑
• hbase
  摘要：参考 https://blog.csdn.net/vbirdbest/article/details/88236575 官网文档 https://hbase.apache.org/book.html#_overriding_configuration_starting_the_hbase_shell 阅读全文
  posted @ 2020-06-18 09:19 大醉和尚 阅读(312) 评论(0) 推荐(0) 编辑
• flink
  摘要：面试 作者：Alonzo95 链接：https://www.jianshu.com/p/0ff85e907a16 来源：简书 著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。 概述 2019 年是大数据实时计算领域最不平凡的一年，2019 年 1 月阿里巴巴 Blink （内部的 阅读全文
  posted @ 2020-06-12 11:15 大醉和尚 阅读(232) 评论(0) 推荐(0) 编辑
• redis
  该文被密码保护。
  posted @ 2018-04-01 16:30 大醉和尚 阅读(1) 评论(0) 推荐(0) 编辑