2018年5月31日

hadoop-2.6.0.tar.gz + spark-1.6.1-bin-hadoop2.6.tgz + zeppelin-0.5.6-incubating-bin-all.tgz(master、slave1和slave2)(博主推荐)(图文详解)

摘要: 我这里,采取的是CentOS6.5,当然大家也可以在ubuntu 16.04系统里,这些都是小事 CentOS 6.5的安装详解 hadoop-2.6.0.tar.gz + spark-1.5.2-bin-hadoop2.6.tgz的集群搭建(单节点)(Ubuntu系统) 大数据搭建各个子项目时配置 阅读全文

posted @ 2018-05-31 13:04 Hi,王松柏 阅读(268) 评论(0) 推荐(0) 编辑

Apache Zeppelin是什么?

摘要: Apache Zeppelin提供了web版的类似ipython的notebook,用于做数据分析和可视化。背后可以接入不同的数据处理引擎,包括spark, hive, tajo等,原生支持scala, java, shell, markdown等。它的整体展现和使用形式和Databricks Cl 阅读全文

posted @ 2018-05-31 13:03 Hi,王松柏 阅读(20996) 评论(1) 推荐(0) 编辑

Zeppelin的入门使用系列之创建新的Notebook

摘要: 前期博客 hadoop-2.6.0.tar.gz + spark-1.6.1-bin-hadoop2.6.tgz + zeppelin-0.5.6-incubating-bin-all.tgz(master、slave1和slave2)(博主推荐)(图文详解) hadoop-2.7.3.tar.gz 阅读全文

posted @ 2018-05-31 13:02 Hi,王松柏 阅读(3006) 评论(0) 推荐(0) 编辑

Hue的全局配置文件hue.ini(图文详解)

摘要: 大数据领域两大最主流集群管理工具Ambari和Cloudera Manger Cloudera安装搭建部署大数据集群(图文分五大步详解)(博主强烈推荐) Ambari安装搭建部署大数据集群(图文分五大步详解)(博主强烈推荐) 前期博客 CDH版本大数据集群下搭建Hue(hadoop-2.6.0-cd 阅读全文

posted @ 2018-05-31 12:56 Hi,王松柏 阅读(5256) 评论(0) 推荐(0) 编辑

CentOS6.5下Cloudera安装搭建部署大数据集群(图文分五大步详解)(博主强烈推荐)

摘要: 第一步: Cloudera Manager安装之Cloudera Manager安装前准备(CentOS6.5)(一) 第二步: Cloudera Manager安装之时间服务器和时间客户端(二) 第三步: Cloudera Manager安装之Cloudera Manager 5.3.X安装(三) 阅读全文

posted @ 2018-05-31 12:55 Hi,王松柏 阅读(273) 评论(0) 推荐(0) 编辑

大数据搭建各个子项目时配置文件技巧(适合CentOS和Ubuntu系统)(博主推荐)

摘要: 不多说,直接上干货! 很多同行,也许都知道,对于我们大数据搭建而言,目前主流,分为Apache 和 Cloudera 和 Ambari。 后两者我不多说,是公司必备和大多数高校科研环境所必须的! 分别,详情见我如下的博客 Cloudera安装搭建部署大数据集群(图文分五大步详解)(博主强烈推荐) A 阅读全文

posted @ 2018-05-31 12:54 Hi,王松柏 阅读(660) 评论(0) 推荐(0) 编辑

关于大数据领域各个组件打包部署到集群运行的总结(含手动和maven)(博主推荐)

摘要: 对于这里的打包,总结: (1) 最简单的,也是为了适应公司里,还是要用maven,当然spark那边sbt,maven都可以。但是maven居多。 Eclipse/MyEclipse下如何Maven管理多个Mapreduce程序?(企业级水平) IDEA里如何多种方式打jar包,然后上传到集群 Sp 阅读全文

posted @ 2018-05-31 12:53 Hi,王松柏 阅读(257) 评论(0) 推荐(0) 编辑

CDH版本大数据集群下搭建Hue(hadoop-2.6.0-cdh5.5.4.gz + hue-3.9.0-cdh5.5.4.tar.gz)(博主推荐)

摘要: 不多说,直接上干货! 我的集群机器情况是 bigdatamaster(192.168.80.10)、bigdataslave1(192.168.80.11)和bigdataslave2(192.168.80.12) 然后,安装目录是在/home/hadoop/app下。 官方建议在master机器上 阅读全文

posted @ 2018-05-31 12:51 Hi,王松柏 阅读(773) 评论(0) 推荐(1) 编辑

手把手教你如何在Fire fox火狐浏览器里在线识别下载视频(超强大)(博主推荐)

摘要: 网址是 阅读全文

posted @ 2018-05-31 12:49 Hi,王松柏 阅读(1175) 评论(0) 推荐(0) 编辑

机器学习概念(博主推荐)

摘要: 不多说,因最近科研的需要,为此从hadoop和spark领域,得结合机器学习/深度学习。为此,给大家带来进一步的干货! 1、机器学习概念 1.1 机器学习的定义 1.2 机器学习的分类 1.2.1 监督学习 1.2.2 无监督学习 1.2.3 半监督学习 1.2.4 强化学习 1.3 机器学习的常见 阅读全文

posted @ 2018-05-31 12:48 Hi,王松柏 阅读(268) 评论(0) 推荐(0) 编辑

导航