摘要: 1.文档编写目的 在CDH中使用Yarn的动态资源池,用户会根据时段来区分集群资源的分配情况(如:在夜晚时段集群资源主要倾向于跑批作业,白天时段集群资源主要倾向于业务部门实时计算作业)。针对这样的需求在CDH中如何配置?本篇文章Fayson主要介绍如何通过CM配置Yarn动态资源池的计划规则。 内容 阅读全文
posted @ 2019-09-04 18:30 纯捡垃圾吃的 阅读(2357) 评论(0) 推荐(0) 编辑
摘要: https://www.cnblogs.com/huxiao-tee/p/4660352.html 阅读全文
posted @ 2019-09-03 14:24 纯捡垃圾吃的 阅读(458) 评论(0) 推荐(0) 编辑
摘要: 概要 Spark流是对于Spark核心API的拓展,从而支持对于实时数据流的可拓展,高吞吐量和容错性流处理。数据可以由多个源取得,例如:Kafka,Flume,Twitter,ZeroMQ,Kinesis或者TCP接口,同时可以使用由如map,reduce,join和window这样的高层接口描述的 阅读全文
posted @ 2019-09-03 09:19 纯捡垃圾吃的 阅读(511) 评论(0) 推荐(0) 编辑
摘要: 配置java,maven等环境变量 java: export JAVA_HOME=/usr/local/java export PATH=$JAVA_HOME/bin:$PATH export CLASSPATH=$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tool.j 阅读全文
posted @ 2019-09-02 16:49 纯捡垃圾吃的 阅读(2513) 评论(8) 推荐(0) 编辑
摘要: <!-- flowchart 箭头图标 勿删 --> 制作Elasticsearch的Parcel包和csd文件 将Parcel包和manifest.json文件部署到httpd服务中 [root@node01 ~]# mkdir -p /var/www/html/elasticsearch [ro 阅读全文
posted @ 2019-09-02 16:43 纯捡垃圾吃的 阅读(4354) 评论(2) 推荐(0) 编辑
返回顶部