摘要:
解决 Recv failure: Connection reset by peer
第一类:网络问题,这一部分通过命令检查gitconfig 排查是否有 http https proxy的问题。
第二类:如果通过http协议拉取代码,则可以通过检查MacOS的钥匙串或者Windows 凭据管理器。 阅读全文
摘要:
class ByteArrayDeserializer is not an instance of org.apache.kafka.common.serialization.Deserializer Debugging Classloading 类似的 X cannot be cast to X 阅读全文
摘要:
APISIX APISIX 声称支持 Dubbo Proxy 实践 主要是 APISIX 官方网站上的这篇博客写的问题很大。 博客上写的 HTTP2DubboService 实现类 @Component public class HTTP2DubboServiceImpl implements HT 阅读全文
摘要:
这里记录一些方法,具备下面的特征:
* 通过租户代理访问 Kerberos 认证的 HADOOP 资源
* 获取 FileSystem 对象的技巧:FileSystem.get(URI, configuration)
* 通用 doAs模板
* 通用 hdfsCommand模板,使用 try-with-resources。 阅读全文
摘要:
Flink 的源码内有这么一个AsyncIOExample程序,非常好用,可以用来无限跑流。用英文说就是long running或者runs forever。同时可以用来测试checkpoints,metricReporter。但很不幸,官方可能忘记加到maven ant插件的构建过程中。 阅读全文
摘要:
问题 Flink 提交作业,直接报错: java.lang.NoSuchMethodError: org.apache.hadoop.tracing.TraceUtils.wrapHadoopConf(Ljava/lang/String;Lorg/apache/hadoop/conf/Configu 阅读全文
摘要:
排查HDFS_DELEGATION_TOKEN过期问题,以及问题汇总。排查分为三种情况,Spark框架自身的问题,Hadoop全家桶的问题,开发者通过Hive,HDFS,HBASE访问HDFS的问题。 阅读全文
摘要:
# Java程序设计-个人月报-2023-08月 ## 背景 在本月,给负责的项目做了一次文件存储的迁移工作。 历史原因,开发阶段由于图简便,使用了本地文件存储。 后面经过容器化上云,导致应用出现上传文件分发的多节点的问题。 本项工作的经验,受益于Java基础Path的一些API,颇有收获。 > 复 阅读全文
摘要:
Openstack4j如何切换Nova Compute服务的版本,使用OSClientSession.headers() (and OSClientSession.getHeaders()) 阅读全文
摘要:
使得项目易于构建部署,适应不同场景下的复杂工程的组织、发行、交付、落地中的问题。多场景部署,优化部署流程,减少不必要的构建和文件复制传输。 阅读全文