随笔分类 -  Linux

摘要:目录 [TOC] 1、CDH介绍 1.1、什么是CDH和CM? CDH一个对Apache Hadoop的集成环境的封装,可以使用Cloudera Manager进行自动化安装。 Cloudera Managerceql(本文中简称CM)是一个工具,CM能够管理一个大的Hadoop cluster并不 阅读全文
posted @ 2016-05-10 15:06 Lion 阅读(6089) 评论(1) 推荐(0)
摘要:用markdown重写,请稳步这里http://www.cnblogs.com/lion.net/p/5477899.html 阅读全文
posted @ 2014-09-02 01:18 Lion 阅读(4494) 评论(0) 推荐(0)
摘要:---------------------------------------- 博文作者:迦壹 博客地址:Nginx日志导入到Hive,同步Hbase,设置RowKey为autoincrement(ID自增长) 转载声明:可以转载, 但必须以超链接形式标 明文章原始出处和作者信息及版权声明,谢谢合 阅读全文
posted @ 2014-08-24 13:49 Lion 阅读(1006) 评论(1) 推荐(0)
摘要:目录: 一、Thrift1和Thrift2的简要介绍 1) 写在前面 2) Thrift1和Thrift2的区别 二、Thrift0.9.2的安装 1) 安装依赖插件 2) Thrift0.9.2的编译 3) Thrift0.9.2编译后,配置成可执行文件 三、Hbase0.96.2的安装 1) H 阅读全文
posted @ 2014-08-22 01:31 Lion 阅读(2821) 评论(0) 推荐(0)
摘要:目录: 一、Flume、Kafka、Storm是什么,如何安装? 二、Flume、Kafka、Storm如何结合使用? 1) 原理是什么? 2) Flume和Kafka的整合 3) Kafka和Storm的整合 4) Flume、Kafka、Storm的整合 一、Flume、Kafka、Storm是 阅读全文
posted @ 2014-08-19 19:52 Lion 阅读(3476) 评论(0) 推荐(1)
摘要:目录: 一、什么是Thrift? 1) Thrift内部框架一瞥 2) 支持的数据传输格式、数据传输方式和服务模型 3) Thrift IDL 二、Thrift的官方网站在哪里? 三、在哪里下载?需要哪些组件的支持? 四、如何安装? 五、Golang、Java、Python、PHP之间通过Thrif 阅读全文
posted @ 2014-08-17 22:19 Lion 阅读(1596) 评论(0) 推荐(0)
摘要:目录: 一、什么是kafka? 二、kafka的官方网站在哪里? 三、在哪里下载?需要哪些组件的支持? 四、如何安装? 五、FAQ 六、扩展阅读 一、什么是kafka? kafka是LinkedIn开发并开源的一个分布式MQ系统,现在是Apache的一个孵化项目。在它的主页描述kaf... 阅读全文
posted @ 2014-08-11 11:28 Lion 阅读(2408) 评论(0) 推荐(0)
摘要:目录: 一、什么是Flume? 1)flume的特点 2)flume的可靠性 3)flume的可恢复性 4)flume 的 一些核心概念 二、flume的官方网站在哪里? 三、在哪里下载? 四、如何安装? 五、flume的案例 1)案例1:Avro 2)案例2:Spool 3)案例3:Exec 4) 阅读全文
posted @ 2014-08-10 18:29 Lion 阅读(1681) 评论(1) 推荐(0)
摘要:目录: 一、什么是Proftpd? 二、Proftpd的官方网站在哪里? 三、在哪里下载? 四、如何安装? 1)系统用户的配置+权限控制 2)虚拟用户的配置+权限控制 一、什么是Proftpd? ProFTPd是一套可配置性强的开放源代码的FTP伺服器软件,名称最後的d字是因... 阅读全文
posted @ 2014-08-09 14:26 Lion 阅读(721) 评论(0) 推荐(0)
摘要:目录: 一、hadoop2.2.0、zookeeper3.4.5、hbase0.96.2、hive0.13.1都是什么? 二、这些软件在哪里下载? 三、如何安装 1、安装JDK 2、用parallels克隆3台机器 3、安装Zookeeper-3.4.5 4、安装hadoop2.2.0 5、启动zo 阅读全文
posted @ 2014-08-05 17:42 Lion 阅读(1803) 评论(0) 推荐(0)
摘要:  无论是稍有规模的IT公司还是大型的ICP、ISP,都需要面对一个问题,就是如何实现对网络和服务器的性能的实时监测。   Cacti是一套基于PHP,MySQL,SNMP及RRDTool开发的网络流量监测图形分析工具。它通过snmpget来获取数据,使用 RRDtool绘画图形,能统计网络设备的流量、CPU、系统负载等参数,也可以自定义监测的指标。而且你完全可以不需要了解RRDtool复杂的参数。它提供了非常强大的数据和用户管理功能,可以指定每一个用户能查看树状结构、host以及任何一张图,还可以与LDAP结合进行用户验证,同时也能自己增加模板,功能非常强大完善,界面友好。虽然 MRTG 是一套非常好用的软件但是它毕竟是一套很旧的软件了,其作者在多年前已经开发出 RRDTool 代替该软件(RRDTool与MRTG对比),现在已经发展的很成熟了,但由于 RRDTool 的指令非常复杂,对 阅读全文
posted @ 2009-08-14 14:44 Lion 阅读(5798) 评论(1) 推荐(2)