随笔分类 -  Hadoop生态

Hadoop生态的部署、监视、调试、优化
摘要:由 Alan Gates创建, 最终由 Andrew Sherman修改于2018年8月7日 原文链接:https://cwiki.apache.org/confluence/display/Hive/Hive+Transactions 翻译:Google Google翻译,金山软件 金山词霸 校对 阅读全文
posted @ 2018-10-11 23:26 范振勇 阅读(9345) 评论(0) 推荐(1) 编辑
摘要:由 Confluence Administrator创建, 最终由 Lars Francke修改于 八月 15, 2018 原文链接 https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DML 翻译:Google Googl 阅读全文
posted @ 2018-10-07 12:32 范振勇 阅读(2361) 评论(0) 推荐(1) 编辑
摘要:Hive DDL(数据定义语言) Confluence Administrator创建, Janaki Lahorani修改于 2018年9月19日 原文链接 https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL 翻译 阅读全文
posted @ 2018-10-06 12:10 范振勇 阅读(8896) 评论(0) 推荐(3) 编辑
摘要:安装Spark 阅读全文
posted @ 2017-02-07 21:41 范振勇 阅读(401) 评论(0) 推荐(0) 编辑
摘要:3. 安装Hadoop 3.1. 解压程序 ※ 3台服务器分别执行 3.2. 设置环境变量 设置JAVA环境变量和Hadoop环境变量 增加 即刻生效 复制到另外两台服务器 3.3. 修改Hadoop参数 cd ${HADOOP_HOME}/etc/hadoop 修改log4j.properties 阅读全文
posted @ 2016-12-18 12:14 范振勇 阅读(439) 评论(0) 推荐(0) 编辑
摘要:Zookeeper是Hadoop HA环境的基石,复杂之处是部署Zookeeper开机自动启动 阅读全文
posted @ 2016-12-18 12:12 范振勇 阅读(883) 评论(0) 推荐(0) 编辑
摘要:为了学习Hadoop生态的部署和调优技术,在笔记本上的3台虚拟机部署Hadoop集群环境,要求保证HA,即主要服务没有单点故障,能够执行最基本功能,完成小内存模式的参数调整。 阅读全文
posted @ 2016-12-16 23:38 范振勇 阅读(683) 评论(0) 推荐(0) 编辑