摘要:
在服务器使用镜像运行代码时出现了该报错。使用了docker run 后,由于是刚接触docker,不知道是什么原因。经网上查阅资料后,了解到原来有可能是我的镜像架构和机器架构不一致。 使用 docker inspect 命令调出我的镜像架构:是arm64 使用uname -a指令查看机器架构:是x8 阅读全文
摘要:
在给Java程序封装镜像时,使用的基础镜像动辄上百M,还需要每次部署的时候挂载时区等问题,不如自己封装一个镜像,供之后使用。 这里使用Alpine Linux(3.9) 安装OpenJDK 1.8及部分常用工具并修改时区: 文末提供Dockerfile 拉取alpine镜像 # docker pul 阅读全文
摘要:
一、概述Spark 作为一个基于内存的分布式计算引擎,其内存管理模块在整个系统中扮演着非常重要的角色。理解 Spark 内存管理的基本原理,有助于更好地开发 Spark 应用程序和进行性能调优。本文旨在梳理出 Spark 内存管理的脉络,抛砖引玉,引出读者对这个话题的深入探讨。本文中阐述的原理基于 阅读全文
摘要:
一、面试题 Spark 通常来说,Spark与MapReduce相比,Spark运行效率更高。请说明效率更高来源于Spark内置的哪些机制? hadoop和spark使用场景? spark如何保证宕机迅速恢复? hadoop和spark的相同点和不同点? RDD持久化原理? checkpoint检查 阅读全文
摘要:
1. kafka-0.8.2 新特性 1.1 异步发送 producer不再区分同步(sync)和异步方式(async),所有的请求以异步方式发送,这样提升了客户端效率。producer请求会返回一个应答对象,包括偏移量或者错误信。 这种异步方地批量的发送消息到kafka broker节点,因而可以 阅读全文
摘要:
iaas,saas,paas,daas区别: Iaas(Infrastructure as a server):基础设施即服务,是基础层。PaaS(Platform as a Server):平台即服务,云端把客户所需的软件的平台作出租。SaaS(Software as a Server):软件即服 阅读全文
摘要:
./redis-cli -a 111 KEYS “key*“ | xargs ./redis-cli -a 111 DEL 阅读全文
摘要:
方法一: git如何clone所有的远程分支 git clone只能clone远程库的master分支,无法clone所有分支,解决办法如下: 找一个干净目录,假设是git_work cd git_work git clone http://myrepo.xxx.com/project/.git , 阅读全文
摘要:
问题描述:今天,在做微服务开发中,A服务区调用B服务,获取数据做导出excel操作。A服务出现了“java.net.SocketTimeoutException: Read timed out ”错误。 ConnectTimeout 连接超时 指的是 建立连接超时,也就是 A服务连接不上B服务,也许 阅读全文
摘要:
1.问题描述: 经常有业务反馈在使用容器云平台过程中监控展示的业务使用内存不准,分析了下kubernetes采集Pod内存使用的实现原理以及相应的解决思路 2.问题分析: 2.1 问题排查: 监控数据是采集的kubernetes上报的container_memory_working_set_byte 阅读全文