摘要: 流式计算的调度复杂性在于需要考虑公平性和数据本地化。 FIFO调度FIFO是一个简单的调度策略,适合用于作业并发少,或者无作业并发,且作业的map任务数量大,最好是大于等于集群的slot数量。FIFO调度中经典的两个问题 head-of-line小作业,多作业并发的场景,量化数据本地化的公式为,为总 阅读全文
posted @ 2019-10-21 19:40 快乐就好 阅读(458) 评论(0) 推荐(0) 编辑
摘要: 1.搭建Maven私服背景 公司还是按捺不住,要搭建一个自己的Maven本地仓库,可以让开发人员down架包,从内网还是快很多。 这样公司的maven本地仓库就是 开发人员自己电脑上的maven仓库 和 Maven远程仓库 之间的一个缓冲仓库。 那要构建一个maven私服,需要用到Maven仓库管理 阅读全文
posted @ 2019-10-21 17:29 快乐就好 阅读(2127) 评论(1) 推荐(0) 编辑
摘要: 注:nexus安装必须要2G内存,否则会提示内存不足 附:非docker方式 windows版本安装方式 进入解压目录 耐心等待安装完成 最终进入http://localhost:8081/访问nexus 具体怎么用,请访问https://www.cnblogs.com/happyday56/p/1 阅读全文
posted @ 2019-10-21 14:59 快乐就好 阅读(294) 评论(0) 推荐(0) 编辑