2014年9月16日

运维系列:10、Spark监控之Metrics

摘要: Spark使用的Metrics是https://github.com/dropwizard/metrics配置参考conf/metrics.properties.template 模块模板,并带有配置说明配置方法syntax: [instance].sink|source.[name].[optio... 阅读全文

posted @ 2014-09-16 17:43 宁 弘道 阅读(1142) 评论(0) 推荐(0) 编辑

日志系统:数据来源的思考

摘要: 数据来源于硬件和软件状态的报告。常见的硬件: 主机:CPU、内存、网络、硬盘等, 路由器: 交换机: 防火墙:软件状态: WEB服务器:Apache、IIS、Nginx、Tomcat 其它软件:文件: TEXT、 CSV、 JSON BIN:非常麻烦,哪种日志? 每条日志定长,可... 阅读全文

posted @ 2014-09-16 15:58 宁 弘道 阅读(178) 评论(0) 推荐(0) 编辑

日志系统:字段类型的思考——String(字符串)、datetime(日期时间)、ip、int(整数)、float(小数)

摘要: 日志本身用来记录事件,因此日志的内容应该包含: 事件发生的日期和时间: 精确度:毫秒(Java中最常用的时间单位)、微秒数(PHP等其它语言中常用的时间单位)、纳秒; 类型:datetime、double、long、、、 事件主体 类型:String 事件客体 类型:S... 阅读全文

posted @ 2014-09-16 14:33 宁 弘道 阅读(467) 评论(0) 推荐(0) 编辑

2014年9月15日

Scala系列:注解

摘要: // TODO 阅读全文

posted @ 2014-09-15 15:41 宁 弘道 阅读(152) 评论(0) 推荐(0) 编辑

Scala系列:集合(容器)

摘要: // TODO 阅读全文

posted @ 2014-09-15 15:40 宁 弘道 阅读(100) 评论(0) 推荐(0) 编辑

Scala系列:继承

摘要: 继承类scala继承类和java一样用关键字extends,子类可以定义超类没有的字段和方法,或重写超类的方法。声明类为final它就不能被继承,还可以将方法或字段声明为final,以确保它们不会被重写。 和Java不同,Java中final声明常量,类似Scala中的val。重写方法Scala中重... 阅读全文

posted @ 2014-09-15 15:39 宁 弘道 阅读(306) 评论(0) 推荐(0) 编辑

Scala系列:package和import

摘要: 包作用:管理大型程序中的名称源文件目录和包之间没有直接的关联关系;包定义可以包含在多个scala文件中;一个文件中可以定义多个包; 1 package com { 2 package hansight { 3 package scala { 4 object EventTyp... 阅读全文

posted @ 2014-09-15 15:38 宁 弘道 阅读(649) 评论(0) 推荐(0) 编辑

Scala系列:对象

摘要: 单例对象scala没有静态方法和静态字段。scala使用object实现,object定义了单个实例。1 object Accounts {2 private var lastNumber = 0;3 def newUniqueNumber() = { lastNumber += 1; la... 阅读全文

posted @ 2014-09-15 15:37 宁 弘道 阅读(253) 评论(0) 推荐(0) 编辑

Scala系列:类

摘要: 简单类和无参方法:1 class Counter {2 private var value = 0; //必须初始化字段3 def increment() = value += 1 //方法默认是公有的4 def current = value5 }使用:1 val counter1 =... 阅读全文

posted @ 2014-09-15 15:29 宁 弘道 阅读(172) 评论(0) 推荐(0) 编辑

Scala系列:Map和Tuple

摘要: Map构造Map不可变:val map = Map("sa" -> 1, "s" -> 2)map("sa") = 3 // errorval emptyMap = newscala.collection.immutable.HashMap[String, Int]可变:val map2 = sca... 阅读全文

posted @ 2014-09-15 12:46 宁 弘道 阅读(3293) 评论(1) 推荐(1) 编辑

导航