摘要：
AWS EC2服务器配置负载均衡器步骤： 1、普通负载均衡器 至少两台EC2实例，这里以Centos6.7系统为例 启动之后先安装个apache的httpd服务器默认80端口，或者使用其他服务器和端口也行，配置负载均衡器的时候需要用到这个端口 iptables防火墙开启80端口或者直接关... 阅读全文
摘要：
简介： k8s一个开源的，跨主机管理容器应用集群的编排系统，为应用提供了基础的部署、维护和扩缩容机制。 编排：跨Docker主机同一管理容器集群。目的 简化开发和运维容器集群的工作。让开发和运维能把这个系统当一台电脑看待。 特点：没有资源调度算法，只关注容器的管理。 核心概念： ... 阅读全文
摘要：
一段程序只能完成功能是没有用的，只能能够稳定、高效率地运行才是生成环境所需要的。本篇记录了Spark各个角度的调优技巧，以备不时之需。一、配置参数的方式和观察性能的方式额。。。从最基本的开始讲，可能一些刚接触Spark的人不是很清楚Spark的一些参数变量到底要配置在哪里。可以通过... 阅读全文
摘要：
（0）一些准备操作：Centos安装好之后（这里使用的是vm虚拟机）将当前用户添加到sudoers中： su root vim /etc/sudoers 找到 root ALL=(ALL) ALL 在之后添加一行 ${user} ALL=(ALL) ... 阅读全文
摘要：
将这段时间了解的MySQL分片技术和主从复制只是整理清楚画了思维导图记录一下，希望能给需要的人一些帮助P.S.：个人整理，可能会有错误之处，还望指出~要解决的问题1、海量数据的操作超出单表、单库的最大限制2、访问压力超出数据库系统限制，性能下降3、数据库复制、容灾等问题解决方案一、... 阅读全文
摘要：
记得一开始的时候，还只能在一些网站上看到关于Docker零星的一些消息，之后的不久，有关Docker消息就遍布网络。是什么因素让Docker火起来的？ 或者说什么原因促使大家都对Docker感兴趣并且开始运用的？本文记录一下自己对Docker的一点见解，关于Docker是什么以及基... 阅读全文
摘要：
1、MySQL安装：EC2直接使用yum安装mysql很方便：yum install mysql mysql-server mysql-libs 此处安装了三个包完事之后可以直接使用 service mysqld start 启动mysql服务修改root密码： mysqladmi... 阅读全文
摘要：
当前使用的事件总线采用的是Kafka分布式消息队列来完成的，近来项目需要接入到事件总线中，故开启了kafka的学习之旅（之前一直在听说kafka这玩意儿，但是学习计划中还没有将它安排进去，借着这个机会学习kafka也算是弥补了这方面的一些遗憾~）关于kafka是神马东西这里就不在累... 阅读全文
摘要：
Hadoop/Spark相关面试问题总结面试回来之后把其中比较重要的问题记了下来写了个总结： （答案在后面）1、简答说一下hadoop的map-reduce编程模型2、hadoop的TextInputFormat作用是什么，如何自定义实现3、hadoop和spark的都是并行计算，... 阅读全文
摘要：
1、冒泡排序def sort(list: List[Int]): List[Int] = list match { case List() => List() case head :: tail => compute(head, sort(tail)) } def ... 阅读全文