2014年9月16日

运维系列：10、Spark监控之Metrics

摘要： Spark使用的Metrics是https://github.com/dropwizard/metrics配置参考conf/metrics.properties.template 模块模板，并带有配置说明配置方法syntax: [instance].sink|source.[name].[optio... 阅读全文

posted @ 2014-09-16 17:43 宁 弘道 阅读(1142) 评论(0) 推荐(0) 编辑

日志系统：数据来源的思考

摘要： 数据来源于硬件和软件状态的报告。常见的硬件： 主机：CPU、内存、网络、硬盘等， 路由器： 交换机： 防火墙：软件状态： WEB服务器：Apache、IIS、Nginx、Tomcat 其它软件：文件： TEXT、 CSV、 JSON BIN：非常麻烦，哪种日志？ 每条日志定长，可... 阅读全文

posted @ 2014-09-16 15:58 宁 弘道 阅读(178) 评论(0) 推荐(0) 编辑

日志系统：字段类型的思考——String（字符串）、datetime（日期时间）、ip、int（整数）、float（小数）

摘要： 日志本身用来记录事件，因此日志的内容应该包含： 事件发生的日期和时间： 精确度：毫秒（Java中最常用的时间单位）、微秒数（PHP等其它语言中常用的时间单位）、纳秒； 类型：datetime、double、long、、、 事件主体 类型：String 事件客体 类型：S... 阅读全文

posted @ 2014-09-16 14:33 宁 弘道 阅读(467) 评论(0) 推荐(0) 编辑

导航