我的随笔

Spark读取HDFS小文件优化

远去的列车 2022-03-27 15:17 阅读:804 评论:0 推荐:0

Spark如何读取gbk等非utf-8编码的文件

远去的列车 2021-12-31 10:20 阅读:436 评论:0 推荐:0

利用SparkLauncher在代码中调用Spark作业

远去的列车 2021-12-30 20:11 阅读:1271 评论:0 推荐:0

linux机器上实现占用固定cpu使用率，并将程序绑定到固定cpu上

远去的列车 2021-02-24 21:18 阅读:525 评论:0 推荐:0

多个HDFS集群的fs.defaultFS配置一样，造成应用一直连接同一个集群的问题分析

远去的列车 2020-12-17 11:33 阅读:4199 评论:0 推荐:0

使用Spark的newAPIHadoopRDD接口访问有kerberos认证的hbase

远去的列车 2020-12-04 19:35 阅读:1645 评论:3 推荐:0

CDH集群spark-shell执行过程分析

远去的列车 2020-11-17 22:05 阅读:1051 评论:0 推荐:0

记一次 HBase Master is initializing 问题处理

远去的列车 2020-11-16 21:11 阅读:6613 评论:0 推荐:0

cloudera集群开启kerberos认证后，删除zk中的/hbase目录

远去的列车 2020-11-13 18:44 阅读:992 评论:0 推荐:0

Flink读写Redis（三）-读取redis数据

远去的列车 2020-11-04 20:51 阅读:12975 评论:1 推荐:1