幻想小说网 酷文学 深夜书屋 叮当小说网 找小说网 无限小说网 红尘小说网
上一页 1 2 3 4 5 6 7 8 9 ··· 100 下一页

2015年8月17日

spark standalone zookeeper HA部署方式

摘要: 虽然spark master挂掉的几率很低,不过还是被我遇到了一次。以前在spark standalone的文章中也介绍过standalone的ha,现在详细说下部署流程,其实也比较简单。一.机器zookeeper集群zk1:2181zk2:2181zk3:2181spark ma... 阅读全文

posted @ 2015-08-17 16:00 张云临 阅读(272) 评论(0) 推荐(0) 编辑

用NAN简化Google V8 JS引擎的扩展

摘要: 通过C++扩展Google V8 JS引擎的文章很多,Google V8 JS带的例子也容易明白。但是大部分文章都是Hello World型的,真正使用时发现处处是坑。扩展V8最经典的例子就是node了,如果要做实际项目,研究一下node本身和及其扩展模块大有裨益。提到node的C... 阅读全文

posted @ 2015-08-17 06:11 张云临 阅读(337) 评论(0) 推荐(0) 编辑

2015年8月15日

在Android上使用Google V8 JS 引擎

摘要: 在cantk-runtime中直接使用的webview,通过JAVA扩展接口把Canvas的2d Context的API定向到JNI,通过OpenGL来图形加速,渲染速度大大提高。后来测试发现在大部分手机上都很正常,但是在有的老手机上速度不稳定,出现突然卡顿的情况。经过研究发现原因... 阅读全文

posted @ 2015-08-15 06:59 张云临 阅读(1695) 评论(0) 推荐(0) 编辑

2015年8月14日

数据可视化工具zeppelin安装

摘要: 介绍zeppelin主要有以下功能数据提取数据发现数据分析数据可视化目前版本(0.5-0.6)之前支持的数据搜索引擎有如下安装环境 centOS 6.6编译准备工作 sudo yum updatesudo yum install openjdk-7-jdksudo yum ins... 阅读全文

posted @ 2015-08-14 22:11 张云临 阅读(234) 评论(0) 推荐(0) 编辑

kafka0.8.2以下版本删除topic

摘要: 一些说明kafka0.8.2及以上版本已经支持delete命令删除topic,可是之前的版本要是想删除topic还是要费一番手脚,绝对是个体力活。。。该方法最好仅在线下开发环境中使用,毕竟要重启zookeeper和broker步骤1.在zk中删除topic信息(test)$KAFK... 阅读全文

posted @ 2015-08-14 21:47 张云临 阅读(197) 评论(0) 推荐(0) 编辑

2015年8月13日

kafka迁移数据目录

摘要: 问题先前存储kafka日志的磁盘空间太小,zabbix警报不断,于是加了磁盘,将日志存到新磁盘上。解决方案依次在每台机器上操作,保证有机器能响应producer和consumer的操作。 加磁盘需要重启服务器。1. 拷贝日志服务器启动后,将以前的日志拷贝到新目录cp /data/k... 阅读全文

posted @ 2015-08-13 17:20 张云临 阅读(1569) 评论(0) 推荐(0) 编辑

2015年8月12日

scala2.10.x case classes cannot have more than 22 parameters

摘要: 问题这个错误出现在case class参数超出22个的时候。case classes cannot have more than 22 parameters在scala 2.11.x版本以下时case class 的参数最多为22个,如果超过这个参数又不能升级时(比如目前spark... 阅读全文

posted @ 2015-08-12 22:40 张云临 阅读(189) 评论(0) 推荐(0) 编辑

2015年8月10日

opscenter dashboard排错

摘要: 系统环境opscenter 5.2 centOS 6.6 cassandra 2.0.x问题opscenter上的dashboard监控cassandra集群一段时间(大约1天)后总会停止显示。然而在cassandra节点上发现datastax-agent进程还是好好的在运行着。之... 阅读全文

posted @ 2015-08-10 10:03 张云临 阅读(125) 评论(0) 推荐(0) 编辑

2015年8月7日

kafka监控工具kafkaOffsetMoniter的使用

摘要: 简介KafkaOffsetMonitor是由Kafka开源社区提供的一款Web管理界面,用来实时监控Kafka的Consumer以及Partition中的Offset,可以在web界面直观的看到每个Partition的Message的增长速度,是否消费,是否阻塞等。使用如果不想编译... 阅读全文

posted @ 2015-08-07 17:45 张云临 阅读(209) 评论(0) 推荐(0) 编辑

2015年8月5日

SparkSQL JSON数据操作(1.3->1.4)

摘要: 1.用户自定义schemadatajson串格式如下:{ "partner_code": "demo", "app_name": "web", "person_info": { "name": "张三", "age": 18 },... 阅读全文

posted @ 2015-08-05 23:00 张云临 阅读(270) 评论(0) 推荐(0) 编辑

上一页 1 2 3 4 5 6 7 8 9 ··· 100 下一页

导航