摘要: 版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142667 LVS负载均衡 1. 基本介绍 负载均衡集群是 load balance 集群的简写,翻译成中文就是负载均衡集群。常用的负载均 阅读全文
posted @ 2017-10-19 17:56 北京尚学堂旗下-云数学院 阅读(452) 评论(0) 推荐(0) 编辑
摘要: 版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142667 flume的概念 1. flume 作为 cloudera 开发的实时日志收集系统,受到了业界的认可与广泛应用。Flume 初 阅读全文
posted @ 2017-09-27 15:05 北京尚学堂旗下-云数学院 阅读(551) 评论(0) 推荐(0) 编辑
摘要: 关系型数据库和非关系型数据库介绍及优劣势比较 版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142667 关系型数据库 关系模型指的就是二维表格模型,而一个关系型数据库就是由二维表及其之 阅读全文
posted @ 2017-09-19 15:45 北京尚学堂旗下-云数学院 阅读(1949) 评论(0) 推荐(0) 编辑
摘要: 版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142667 时间同步简介 1、为什么需要时间同步 随着集群节点数的增加,集群各节点之间时间不一致的问题会越来越严重,经常会引发故障,为避免 阅读全文
posted @ 2017-09-18 15:40 北京尚学堂旗下-云数学院 阅读(228) 评论(0) 推荐(0) 编辑
摘要: 自定义UDF函数应用异常 版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142667 定义函数PlatformConvert: 实现传入hive表中string类型字段,通过查询中间表, 阅读全文
posted @ 2017-08-31 16:34 北京尚学堂旗下-云数学院 阅读(3739) 评论(0) 推荐(0) 编辑
摘要: 版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处:http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142667 Hadoop异常总结 hadoop启动不正常,hadoop datanode节点超时时间设置,HDFS冗余数据块的自动删除,na 阅读全文
posted @ 2017-08-28 17:41 北京尚学堂旗下-云数学院 阅读(397) 评论(0) 推荐(0) 编辑
摘要: 版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142667 sqoop Apache Sqoop是用来实现结构型数据(如关系数据库)和Hadoop之间进行数据迁移的工具。它充分利用了Ma 阅读全文
posted @ 2017-08-25 15:05 北京尚学堂旗下-云数学院 阅读(407) 评论(0) 推荐(0) 编辑
摘要: 使用hadoop mapreduce分析mongodb数据 (现在很多互联网爬虫将数据存入mongdb中,所以研究了一下,写此文档) 版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142 阅读全文
posted @ 2017-07-27 16:18 北京尚学堂旗下-云数学院 阅读(670) 评论(0) 推荐(0) 编辑
摘要: Sqoop将mysql数据导入hbase的血与泪(整整搞了大半天) 版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: https://my.oschina.net/yunshuxueyuan/blogQQ技术交流群:299142667 一、 问题如何产生 庞老师只讲解了mys 阅读全文
posted @ 2017-07-26 15:44 北京尚学堂旗下-云数学院 阅读(14873) 评论(3) 推荐(2) 编辑
摘要: Hadoop之HDFS 版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142667 HDFS介绍 HDFS(Hadoop Distributed File System )Hadoop分 阅读全文
posted @ 2017-07-24 16:58 北京尚学堂旗下-云数学院 阅读(8381) 评论(0) 推荐(3) 编辑