摘要： 做作业的过程中发现，把一节点停掉，dfsadmin和50070都无法马上感知到一个data node已经死掉 HDFS默认的超时时间为10分钟+30秒。这里暂且定义超时时间为timeout计算公式为： 而默认的heartbeat.recheck.interval 大小为5分钟，dfs.heartbe 阅读全文

摘要： 范例一：将整个 /etc 目录下的档案全部打包成为 /tmp/etc.tar [root@linux ~]# tar -cvf /tmp/etc.tar /etc <==仅打包，不压缩！ [root@linux ~]# tar -czvf /tmp/etc.tar.gz /etc <==打包后，以 阅读全文

摘要： 1. 场景：先分别安装两个master在node7、node8服务器上，然后运行，接着再停掉master服务。最后在node3服务器安装master服务,分别修改在每个节点的master.gflagfile文件--master_addresses=node7,node8,node9，再将node7、 阅读全文

摘要： 转载：https://blog.csdn.net/wisdom_c_1010/article/details/56830837 阅读全文

摘要： kudu 1.7 源码安装（RHEL 或Centos版） 一. 安装环境依赖 二.如果RHEL or CentOS 版本是7.0以上的，则需要安装开发以下工具 三.安装额外的软件和文档构建工具 四.下载kudu源码 五.构建第三方平台需要的环境 这个步骤会下载相关的依赖包，会花费比较长的时间 六.构 阅读全文

摘要： hue 集成spark+livy 一.先决条件 安装hue、hadoop。 二.spark on yarn 安装 1.添加环境变量 vim /etc/profile 2.配置spark; vim conf/spark-env.sh 3.配置spark ;vim conf/spark-defaults 阅读全文

摘要： hue默认使用sqlite作为元数据库，不推荐在生产环境中使用这个数据库使用mysql做元数据 1， 修改hue.ini文件[[database]]engine=mysqlhost=<mysql所在服务器>port=<mysql端口，一般就是3306了>user=<用户名>password=<密码> 阅读全文

摘要： 大数据已经火了四五年，但你真的知道怎么用它来驱动产品和运营吗？ 36氪的朋友们 • 2016-03-12 • 深氪 在2011年、2012年大数据概念火了，但是你是否知道如何将其运用到产品和运营上呢？ 编者按：本文作者为桑文锋，Sensors Data创始人&CEO，前百度大数据部技术经理。2005 阅读全文

摘要： hue 4.2.0安装 一. 安装依赖 二.安装 oracle JDK 这个程序员都会，这里就不说了哈 三.安装MAVEN 配置maven远程仓库 四.下载并安装hue 如果编译出现问题，需要重新clean，再编译 五.配置hue.ini Hue的配置集中在$HUE_HOME/desktop/con 阅读全文

摘要： Hadoop环境搭建笔记整理（四)——Hive1.2.2的安装和配置 苏洛尔寂 www.bdqll.top，别看了啥也没有 苏洛尔寂 www.bdqll.top，别看了啥也没有 苏洛尔寂 www.bdqll.top，别看了啥也没有 苏洛尔寂 苏洛尔寂 苏洛尔寂 www.bdqll.top，别看了啥也 阅读全文