11 2018 档案

yarn虚拟cpu和虚拟内存
摘要：虚拟cpu 虚拟的cpu代码并发数，如果一个container拥有2个vcpu，那么该container就可以真正的在同一时间运行两个线程，而不是靠切时间片而达到的逻辑并发。所以一般虚拟的cpu需要和物理cpu的个数保持一致 yarn的计算单元称为YCUs，其实就是把1个cpu分为n份，通常情况控制 阅读全文
posted @ 2018-11-28 13:23 ulysses_you 阅读(4022) 评论(0) 推荐(0) 编辑
flume介绍
摘要：前言 本文通过对flume的架构，数据链路和数据的可靠性来分析flume的原理，并在文末提供了demo（官网搬运）。 架构 flume可以理解为是一个ETL工具，本身是单点的，也就是只有agent，没有server，但是通过强大的source-channel-sink-source…机制，可以通过在 阅读全文
posted @ 2018-11-01 11:52 ulysses_you 阅读(1447) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示