摘要:
在实际项目中,我们经常用到需要自动化部署软件的情况,这种情况下,我们就不能人为地在命令行下敲击命令了,一切都需要通过shell脚本自动化完成。所谓自动化完成,其实也就是通过写shell程序,模拟人为敲击linux指令,这样一来,所有的指令一气呵成,方便自动化部署。 我们以一个简单的例子进行说明: 需 阅读全文
摘要:
1. Nginx相关概念 1.1 反向代理 反向代理(Reverse Proxy)方式是指以代理服务器来接受internet上的连接请求,然后将请求转发给内部网络上的服务器,并将从服务器上得到的结果返回给internet上请求连接的客户端,此时代理服务器对外就表现为一个服务器。 1.2 负载均衡 负 阅读全文
摘要:
1. 修改静态地址后发现无法ping外网 要先把/etc/sysconfig/network-scripts/ifcfg-eth0中的网关设置成192.168.230.2。 需要设置网关 添加nameserver 2. 解决克隆后eth0不见的问题 直接修改 /etc/sysconfig/netwo 阅读全文
摘要:
作为一个计算机专业的科班,不会玩Linux怎么能行呢?玩Linux用可视化界面显得太low了,为了效(zhuang)率(bi),当然要用什么都用指令啊,可是指令太多了啊,现在就把平时遇到的高频的指令做一个小结吧。 1. 常用命令 1.进入到用户根目录cd ~ 或 cd 2.查看当前所在目录pwd 3 阅读全文
摘要:
1. 单节点架构 2. 集群架构 3. 集群+分布式架构 4. 淘宝技术的演变 马总在2003年4月7日秘密叫来阿里巴巴的十位员工,来到杭州一个隐秘的毛坯房,要求他们在一个月左右的时间内做出一个C2C网站。结果当然还是直接买的快,一个基于LAMP架构的网站,原名是PHPAuction,老美开发的一个 阅读全文
摘要:
VMware虚拟机三种联网方法及原理 一、Brigde——桥接:默认使用VMnet0 1、原理: Bridge 桥"就是一个主机,这个机器拥有两块网卡,分别处于两个局域网中,同时在"桥"上,运行着程序,让局域网A中的所有数据包原封不动的流入B,反之亦然。这样,局域网A和B就无缝的在链路层连接起来了, 阅读全文
摘要:
这个项目是流量经营项目,通过Hadoop的离线数据项目。 运营商通过HTTP日志,分析用户的上网行为数据,进行行为轨迹的增强。 HTTP数据格式为: 流程: 系统架构: 技术选型: 这里只针对其中的一个功能进行说明: 其中规则库是人工填充的,实例库是采用机器学习自动生成的,形式都是<url,info 阅读全文
摘要:
参考官方文档:http://flume.apache.org/FlumeUserGuide.html 1. 概述 1、Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。 2、Flume可以采集文件,socket数据包等各种形式源数据,又可以将采集到的数据输出到HDFS、hbas 阅读全文
摘要:
Apache,指的是Apache软件基金会下的一个项目——Apache HTTP Server Project;Nginx同样也是一款开源的HTTP服务器软件(当然它也可以作为邮件代理服务器、通用的TCP代理服务器)。 HTTP服务器本质上也是一种应用程序——它通常运行在服务器之上,绑定服务器的IP 阅读全文
摘要:
1. 相关概念 1. kafka是一个分布式的消息缓存系统2. kafka集群中的服务器都叫做broker3. kafka有两类客户端,一类叫producer(消息生产者),一类叫做consumer(消息消费者),客户端和broker服务器之间采用tcp协议连接4. kafka中不同业务系统的消息可 阅读全文