09 2023 档案

摘要:一.安装spark 1.1 下载并解压 官方下载地址:http://spark.apache.org/downloads.html ,选择 Spark 版本和对应的 Hadoop 版本后再下载: 解压安装包 # tar -zxvf spark-2.2.3-bin-hadoop2.6.tgz 1.2 阅读全文
posted @ 2023-09-27 17:20 whiteY 阅读(19) 评论(0) 推荐(0) 编辑
摘要:1.调整HDFS副本数 ##该命令只会设置当前已有的文件副本数,不会改默认副本数参数 hadoop fs -setrep -R -w 5 /corelogs 2.查看HDFS当前文件副本数 hadoop fs -ls /corelogs ##显示的第二个参数即为当前副本数 阅读全文
posted @ 2023-09-20 15:52 whiteY 阅读(560) 评论(0) 推荐(0) 编辑
摘要:1.官网 https://paimon.apache.org/docs/master/engines/hive/ 2.安装flink 3.下载依赖包到flink lib目录下 4.运行yarnsession 创建Application-Name,并修改配置文件 ./bin/yarn-session. 阅读全文
posted @ 2023-09-19 18:03 whiteY 阅读(842) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示