摘要:
版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142667 LVS负载均衡 1. 基本介绍 负载均衡集群是 load balance 集群的简写,翻译成中文就是负载均衡集群。常用的负载均 阅读全文
摘要:
版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142667 flume的概念 1. flume 作为 cloudera 开发的实时日志收集系统,受到了业界的认可与广泛应用。Flume 初 阅读全文
摘要:
关系型数据库和非关系型数据库介绍及优劣势比较 版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142667 关系型数据库 关系模型指的就是二维表格模型,而一个关系型数据库就是由二维表及其之 阅读全文
摘要:
版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142667 时间同步简介 1、为什么需要时间同步 随着集群节点数的增加,集群各节点之间时间不一致的问题会越来越严重,经常会引发故障,为避免 阅读全文
摘要:
自定义UDF函数应用异常 版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142667 定义函数PlatformConvert: 实现传入hive表中string类型字段,通过查询中间表, 阅读全文
摘要:
版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处:http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142667 Hadoop异常总结 hadoop启动不正常,hadoop datanode节点超时时间设置,HDFS冗余数据块的自动删除,na 阅读全文
摘要:
版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142667 sqoop Apache Sqoop是用来实现结构型数据(如关系数据库)和Hadoop之间进行数据迁移的工具。它充分利用了Ma 阅读全文
摘要:
使用hadoop mapreduce分析mongodb数据 (现在很多互联网爬虫将数据存入mongdb中,所以研究了一下,写此文档) 版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142 阅读全文
摘要:
Sqoop将mysql数据导入hbase的血与泪(整整搞了大半天) 版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: https://my.oschina.net/yunshuxueyuan/blogQQ技术交流群:299142667 一、 问题如何产生 庞老师只讲解了mys 阅读全文
摘要:
Hadoop之HDFS 版权声明:本文为yunshuxueyuan原创文章。如需转载请标明出处: http://www.cnblogs.com/sxt-zkys/QQ技术交流群:299142667 HDFS介绍 HDFS(Hadoop Distributed File System )Hadoop分 阅读全文