该文被密码保护。 阅读全文
摘要:
sparkUI 源码: https://www.cnblogs.com/barrenlake/p/4364644.html 页面介绍: https://blog.csdn.net/qq_27639777/article/details/81069893 阅读全文
摘要:
1. docker architecture 2. 命令 阅读全文
摘要:
为什么有docker? 1. 宿主机可以虚拟一个硬件平台;其上会有内核(在虚拟机上的操作系统),内核负责资源调度和通信;内核之上会有用户态,运行在用户态(用户空间)之上多是应用程序,也就是进程。硬件(虚机)平台->内核->应用程序。 2. 运行一个应用服务需要提供从硬件到内核的支撑并提供两层调度,多 阅读全文
摘要:
https://www.cnblogs.com/jclian91/tag/NLP/ 阅读全文
摘要:
https://www.cnblogs.com/beliefbetrayal/archive/2012/02/03/2337522.html 阅读全文
摘要:
声明:本文总结于网络 一、消息中间件介绍 二、消息中间件应用场景 三、消息中间件 3.1 常用的消息中间件 3.1.1 kafka 生产 producer采用推(push)模式将消息发布到broker,每条消息都被追加到分区(partition)中,属于顺序写盘(顺序写盘效率比随机写盘的效率要高,保 阅读全文
摘要:
1、概述 总的来讲,每一个spark驱动程序应用都由一个驱动程序组成,该驱动程序包含一个由用户编写的main方法,该方法会在集群上执行一些并行计算操作。Spark最重要的一个概念是弹性分布式数据集,简称RDD,RDD是一个数据容器,他将分布式在集群上各个节点上的数据抽象为一个数据集,并且RDD能够进 阅读全文