返回顶部
扩大
缩小

Heaton

随笔分类 -  ③环境篇

环境篇:Atlas2.1.0兼容CDH6.3.2部署
摘要:环境篇:Atlas2.1.0兼容CDH6.3.2部署 Atlas 是什么? Atlas是一组可扩展和可扩展的核心基础治理服务,使企业能够有效地满足Hadoop中的合规性要求,并允许与整个企业数据生态系统集成。 Apache Atlas为组织提供了开放的元数据管理和治理功能,以建立其数据资产的目录,对 阅读全文

posted @ 2020-12-16 13:59 咘雷扎克 阅读(3328) 评论(0) 推荐(0) 编辑

环境篇:数据同步工具DataX
摘要:环境篇:数据同步工具DataX 1 概述 https://github.com/alibaba/DataX DataX是什么? DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、SQL Server、Oracle、PostgreSQL、HDFS、Hive、HBas 阅读全文

posted @ 2020-07-30 17:37 咘雷扎克 阅读(1673) 评论(3) 推荐(0) 编辑

环境篇:DolphinScheduler-1.3.1安装部署及使用技巧
摘要:环境篇:DolphinScheduler-1.3.1安装部署 1 配置jdk JDK百度网盘:https://pan.baidu.com/s/1og3mfefJrwl1QGZGZDZ8Sw 提取码:t6l1 #查看命令 rpm -qa | grep java #删除命令 rpm -e --nodep 阅读全文

posted @ 2020-07-28 23:11 咘雷扎克 阅读(20443) 评论(4) 推荐(6) 编辑

环境篇:Kylin3.0.1集成CDH6.2.0
摘要:环境篇:Kylin3.0.1集成CDH6.2.0 Kylin是什么? Apache Kylin™是一个开源的、分布式的分析型数据仓库,提供Hadoop/Spark 之上的 SQL 查询接口及多维分析(OLAP)能力以支持超大规模数据,最初由 eBay 开发并贡献至开源社区。它能在亚秒内查询巨大的表。 阅读全文

posted @ 2020-06-18 22:37 咘雷扎克 阅读(1760) 评论(1) 推荐(3) 编辑

环境篇:CDH优化篇
摘要:环境篇:CDH优化篇 为什么出这篇文章? 近期有很多公司开始引入大数据,由于各方资源有限,并不能合理分配服务器资源,和服务器选型,小叶这里将工作中的总结出来,给新入行的小伙伴带个方向,以下会将企业级测试环境和线上环境的基础方案给出,不敢说一定对,但是本人亲自测试,发现集群使用率稳定提高了3分之1,最 阅读全文

posted @ 2020-06-12 10:58 咘雷扎克 阅读(5484) 评论(0) 推荐(3) 编辑

环境篇:CM+CDH6.3.2环境搭建(全网最全)
摘要:环境篇:CM+CDH6.3.2环境搭建(全网最全) 零 杂谈 0.1 相关大事件 国外: 2010年,美国总统办公室下属科学技术顾问委员会和信息技术顾问向奥巴马和国会提交《规划数字化未来》,报告提出”如何收集、保存、管理、分析、共享正成指数增长的数据是我们面临的一个挑战“ 2012年3月,奥巴马签署 阅读全文

posted @ 2020-06-09 15:08 咘雷扎克 阅读(10191) 评论(3) 推荐(8) 编辑

环境篇:Zeppelin
摘要:环境篇:Zeppelin Zeppelin 是什么 Apache Zeppelin 是一个让交互式数据分析变得可行的基于网页的开源框架。Zeppelin提供了数据分析、数据可视化等功能。 Zeppelin 是一个提供交互数据分析且基于Web的笔记本。方便你做出可数据驱动的、可交互且可协作的精美文档, 阅读全文

posted @ 2020-05-24 18:35 咘雷扎克 阅读(4444) 评论(0) 推荐(0) 编辑

环境篇:Atlas2.0.0兼容CDH6.2.0部署
摘要:环境篇:Atlas2.0.0兼容CDH6.2.0部署 Atlas 是什么? Atlas是一组可扩展和可扩展的核心基础治理服务,使企业能够有效地满足Hadoop中的合规性要求,并允许与整个企业数据生态系统集成。 Apache Atlas为组织提供了开放的元数据管理和治理功能,以建立其数据资产的目录,对 阅读全文

posted @ 2020-05-08 22:48 咘雷扎克 阅读(5046) 评论(6) 推荐(2) 编辑

环境篇:Docker
摘要:环境篇:Docker "www.docker.com" Docker 是什么? Docker 是一个开源的应用容器引擎,基于Go语言并遵从Apache协议的开源,让开发者可以打包他们的应用以及依赖包到一个可移植的镜像中,然后发布到任何流行的 Linux或Windows 机器上,也可以实现虚拟化。容器 阅读全文

posted @ 2020-03-26 17:26 咘雷扎克 阅读(629) 评论(0) 推荐(1) 编辑

环境篇:Virtualbox+Vagrant安装Centos7
摘要:环境篇:Virtualbox+Vagrant安装Centos7 1 安装Vagrant Vagrant下载地址: "https://www.vagrantup.com/" Vagrant百度网盘: "https://pan.baidu.com/s/1jqnMml024niqWQPbrGVuJw" 提 阅读全文

posted @ 2020-03-25 17:16 咘雷扎克 阅读(4290) 评论(1) 推荐(2) 编辑

环境篇:VMware Workstation安装Centos7
摘要:环境篇:VMware Workstation安装Centos7 1 VMware Workstation安装 CentOS下载地址: "http://isoredirect.centos.org/centos/7/isos/x86_64/" CentOS百度网盘: "https://pan.baid 阅读全文

posted @ 2020-03-25 14:55 咘雷扎克 阅读(4093) 评论(0) 推荐(1) 编辑

环境篇:CM+CDH6.2.0安装(全网最全)
摘要:CM+CDH6.2.0环境准备 一 虚拟机及CentOs7配置 CentOS下载地址: "http://isoredirect.centos.org/centos/7/isos/x86_64/" CentOS百度网盘: "https://pan.baidu.com/s/196ji62wTpIAhkT 阅读全文

posted @ 2020-02-02 21:07 咘雷扎克 阅读(2238) 评论(0) 推荐(0) 编辑

环境篇:Git和Github
摘要:环境篇:Git和Github Git是什么? Git是目前世界上最先进的分布式版本控制系统。工作原理 / 流程: Workspace:工作区 Index / Stage:暂存区 Repository:仓库区(或本地仓库) Remote:远程仓库 (一般公司内网选择GitLab,外网可以选择GitHu 阅读全文

posted @ 2020-02-01 21:22 咘雷扎克 阅读(1419) 评论(3) 推荐(9) 编辑

环境篇:DolphinScheduler-1.2.0.release安装部署
摘要:环境篇:DolphinScheduler 1.2.0.release安装部署 1 配置jdk JDK百度网盘: "https://pan.baidu.com/s/1og3mfefJrwl1QGZGZDZ8Sw" 提取码:t6l1 将oracle j2sdk1.8 1.8.0+update181 1. 阅读全文

posted @ 2020-01-04 22:50 咘雷扎克 阅读(1424) 评论(0) 推荐(0) 编辑

环境篇:Google被墙怎么办?
摘要:Google被墙怎么办? Google是什么? 相信大家遇到问题,首先会想起度娘(baidu),Google是外国的蛊娘。 如果没有Google! 当然我也是度娘粉,但是耐不住有的时候想知道些新鲜事和知识,度娘上面没有,所以这个时候可以使用Google搜索去完成我们自己的好奇心和求知欲咯! 1 声明 阅读全文

posted @ 2020-01-03 21:28 咘雷扎克 阅读(3812) 评论(0) 推荐(1) 编辑

环境篇:Anaconda安装Python
摘要:环境篇:Anaconda安装Python "www.anaconda.com" "www.anaconda.com/products/individual" 1 Windos安装 一路下一步,注意添加环境变量 成功过后,测试一下,打开cmd命令行 2 Linux安装 下载完成后上传到linux 一路 阅读全文

posted @ 2019-02-17 16:10 咘雷扎克 阅读(10672) 评论(0) 推荐(2) 编辑

环境篇:Java环境
摘要:环境篇:Java环境 Java是什么? Java 是一项用于开发应用程序的技术语言,可以让 Web 变得更有意思和更实用。使用 Java 可以玩游戏、上载照片、联机聊天以及参与虚拟体验,并能够使用联机培训、网上银行和互动地图等服务。 如果没有Java! 没有,没有就换一门语言呗。只是大部分Java开 阅读全文

posted @ 2018-08-12 22:44 咘雷扎克 阅读(598) 评论(0) 推荐(0) 编辑

导航