上一页 1 ··· 3 4 5 6 7 8 9 10 11 ··· 22 下一页
摘要: Oozie简介 Oozie是大数据四大协作框架之一——任务调度框架,另外三个分别为数据转换工具Sqoop,文件收集库框架Flume,大数据WEB工具Hue。 它能够提供对Hadoop MapReduce和Pig Jobs的任务调度与协调。 Oozie需要部署到Java Servlet容器中运行。 功 阅读全文
posted @ 2020-07-31 11:26 古语云 阅读(609) 评论(0) 推荐(0) 编辑
摘要: 简介 (翻译自官网) Oozie是一个用于管理Apache Hadoop作业的工作流调度程序系统。 Oozie Workflow job是由多个Action组成的有向无环图(DAG)。 Oozie Coordinator job是根据时间(频率)和数据可用性触发的可重复执行的Oozie Workfl 阅读全文
posted @ 2020-07-31 11:25 古语云 阅读(708) 评论(0) 推荐(0) 编辑
摘要: 环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 jdk8 CM5.4 同类产品:Azkaban 一、简介Oozie由Cloudera公司贡献给Apache的基于工作流引擎的开源框架,是用于Hadoop平台的开源的工作流 阅读全文
posted @ 2020-07-31 11:24 古语云 阅读(391) 评论(0) 推荐(0) 编辑
摘要: Mongodb是时下流行的NoSql数据库,它的存储方式是文档式存储,并不是Key-Value形式。关于Mongodb的特点,这里就不多介绍了,大家可以去看看官方说明:http://docs.mongodb.org/manual/ 今天主要来说说Mongodb的三种集群方式的搭建:Replica S 阅读全文
posted @ 2020-06-23 17:40 古语云 阅读(5107) 评论(0) 推荐(1) 编辑
摘要: 使用maven的项目中,有时需要把本地的项目打成jar包上传到mevan仓库。 操作如下: 前提:pom文件中配置好远程库的地址,否则会报错 1、将maven 中的settings文件配置好用户名和密码,如下: <servers> <server> <id>releases</id> <userna 阅读全文
posted @ 2020-06-18 16:40 古语云 阅读(1161) 评论(0) 推荐(0) 编辑
摘要: 【BVT的释义】 BVT的全称是Build Verification Test。可以说这个全称就是BVT的定义了。 BVT只验证build构建的成功与失败,不深入测试构建好的build的功能、性能等等。 BVT是在所有开发工程师都已经检入自己的代码,项目组编译生成当天的版本之后进行,主要目的是验证最 阅读全文
posted @ 2020-06-16 09:35 古语云 阅读(1004) 评论(0) 推荐(0) 编辑
摘要: Swap交换分区概念 https://www.cnblogs.com/kerrycode/p/5246383.html 什么是Linux swap space呢?我们先来看看下面两段关于Linux swap space的英文介绍资料: Linux divides its physical RAM ( 阅读全文
posted @ 2020-06-04 15:00 古语云 阅读(453) 评论(1) 推荐(0) 编辑
摘要: Linux 增加 swap 分区大小 1. 命令 free -m 查看当前内存和 swap 分区使用情况 2.Swap 分区说明: 当内存为 16G 以下时, swap 分区大小应和内存相等;当内存大于等于 16G 时, swap 分区大小应为 16G 。因此,这里差了一点 swap 分区,大约 2 阅读全文
posted @ 2020-06-04 14:48 古语云 阅读(1523) 评论(0) 推荐(0) 编辑
摘要: 一、在CentOS6 及 以前的版本中,free命令输出是这样的: $free 第一行: 系统内存主要分为四部分:used(程序已使用内存),free(空闲内存),buffers(buffer cache),cached(Page cache)。 系统总内存:total = used + free; 阅读全文
posted @ 2020-06-04 14:29 古语云 阅读(1579) 评论(0) 推荐(0) 编辑
摘要: 相信有许多同学都对free命令中的buffers cached十分不理解,今天笔者就对free命令机器结果做一个详细的剖析。 以下是笔者在虚拟机上运行的debian系统的free情况。该虚拟机内存只有128M,同时分配了256M的SWAP交换区。 total used free shared buf 阅读全文
posted @ 2020-06-04 14:13 古语云 阅读(1147) 评论(0) 推荐(0) 编辑
上一页 1 ··· 3 4 5 6 7 8 9 10 11 ··· 22 下一页