摘要： 解决Spark集群无法停止 执行stop-all.sh时，出现报错：no org.apache.spark.deploy.master.Master to stop，no org.apache.spark.deploy.worker.Worker to stop 原因： Spark的停止，是通过一些 阅读全文

摘要： 一、调度分类 调度分为两种，一是应用之间的，二是应用内部作业的。 （一）应用之间 我们前面几章有说过，一个spark-submit提交的是一个应用，不同的应用之间是有调度的，这个就由资源分配者来调度。如果我们使用Yarn，那么就由Yarn来调度。调度方式的配置就在$HADOOP_HOME/etc/h 阅读全文

摘要： hadoop，hbase，hive，zookeeper整合可行性分析及版本确定 问题导读1.如何确定什么版本是稳定版本？2.本文是如何确定各个版本的？3.hbase1.x与hive1.x什么情况下是兼容的？前面一篇写过hadoop,hbase,hive，zookeeper版本整合兼容性最全，最详细说 阅读全文

摘要： 1.spark 和kudu 的兼容版本 spark 2.2 需要 kudu 1.5.0 阅读全文

摘要： 一、spark 2.2 需要Kudu 1.5.0以上版本 二、Impala兼容Apache Impala 2.8.0 版本 阅读全文

摘要： Configuring Network Names This page is for manual CDH installations only. Cloudera Manager users should disregard.Important: CDH requires IPv4. IPv6 i 阅读全文

摘要： $ wget http://repo.mysql.com/mysql-community-release-el7-5.noarch.rpm $ sudo rpm -ivh mysql-community-release-el7-5.noarch.rpm $ yum update $ sudo yum install mysql-server $ sudo systemctl start mysq... 阅读全文

摘要： 下载rpms包 cm5.14.0版本的下载地址：http://archive.cloudera.com/cm5/redhat/7/x86_64/cm/5.14.0/RPMS/x86_64/ 为了便于执行命令，我们将在所有节点中创建~/soft/这样一个目录，并在此目录下进行以下安装操作。如果步骤1中 阅读全文

摘要： hadoop 和hbase 版本兼容矩阵： 阅读全文

摘要： 架构 前三章从 job 的角度介绍了用户写的 program 如何一步步地被分解和执行。这一章主要从架构的角度来讨论 master，worker，driver 和 executor 之间怎么协调来完成整个 job 的运行。 实在不想在文档中贴过多的代码，这章贴这么多，只是为了方面自己回头 debug 阅读全文