幻想小说网 酷文学 深夜书屋 叮当小说网 找小说网 无限小说网 红尘小说网

08 2015 档案

libuv里的几个缺陷
摘要:libuv是node.js使用的基础库,主要包括主循环,文件和网络接口。虽然libuv是为node.js而生的,但它本身是一个独立的库,加上使用简单方便,所以在node.js之外也有不少人使用。最近整合libuv到V8里时发现几个问题:1.uv_fs相关函数无法传回调函数需要的上下... 阅读全文

posted @ 2015-08-30 10:18 张云临 阅读(1983) 评论(0) 推荐(0) 编辑

hue安装与部署
摘要:运行环境centOS 6.6hadoop 2.4.0hive 1.2.0spark 1.4.1HUE 3.9介绍:Hue是一个开源的Apache Hadoop UI系统,最早是由Cloudera Desktop演化而来,由Cloudera贡献给开源社区,它是基于Python Web... 阅读全文

posted @ 2015-08-22 22:45 张云临 阅读(1039) 评论(0) 推荐(0) 编辑

centOS6.6升级gcc4.8
摘要:最近想升级mesos0.23.0,结果编译mesos0.23.0需要gcc4.8+,可是centOS6.6最高版本的gcc也只到4.4.7版本,只好手动升级一下了。下载4.8.2源码wget ftp://gcc.gnu.org/pub/gcc/releases/gcc-4.8.2/... 阅读全文

posted @ 2015-08-20 23:11 张云临 阅读(105) 评论(0) 推荐(0) 编辑

kafka 0.8.x producer Example(scala)
摘要:Producer最简配置 metadata.broker.list参数指定broker地址,这里不需要填上所有的broker地址,但是如果只写一个,这个broker挂掉后就无法往topic中写入信息,一般写入2-3个broker地址。 serializer.class指定序列化的方... 阅读全文

posted @ 2015-08-18 17:29 张云临 阅读(212) 评论(0) 推荐(0) 编辑

Google V8扩展利器发布:v8-native-binding-generator
摘要:用C++扩展Google V8很简单,但是类比较多时还是很烦的。前段时间开发cantk-runtime-v8时,我写了一个代码产生器v8-native-binding-generator,让扩展Google V8变得非常方便,甚至无需要了解V8本身。具体用法如下:先写一个JSON的... 阅读全文

posted @ 2015-08-18 06:01 张云临 阅读(337) 评论(0) 推荐(0) 编辑

spark standalone zookeeper HA部署方式
摘要:虽然spark master挂掉的几率很低,不过还是被我遇到了一次。以前在spark standalone的文章中也介绍过standalone的ha,现在详细说下部署流程,其实也比较简单。一.机器zookeeper集群zk1:2181zk2:2181zk3:2181spark ma... 阅读全文

posted @ 2015-08-17 16:00 张云临 阅读(278) 评论(0) 推荐(0) 编辑

用NAN简化Google V8 JS引擎的扩展
摘要:通过C++扩展Google V8 JS引擎的文章很多,Google V8 JS带的例子也容易明白。但是大部分文章都是Hello World型的,真正使用时发现处处是坑。扩展V8最经典的例子就是node了,如果要做实际项目,研究一下node本身和及其扩展模块大有裨益。提到node的C... 阅读全文

posted @ 2015-08-17 06:11 张云临 阅读(342) 评论(0) 推荐(0) 编辑

在Android上使用Google V8 JS 引擎
摘要:在cantk-runtime中直接使用的webview,通过JAVA扩展接口把Canvas的2d Context的API定向到JNI,通过OpenGL来图形加速,渲染速度大大提高。后来测试发现在大部分手机上都很正常,但是在有的老手机上速度不稳定,出现突然卡顿的情况。经过研究发现原因... 阅读全文

posted @ 2015-08-15 06:59 张云临 阅读(1698) 评论(0) 推荐(0) 编辑

数据可视化工具zeppelin安装
摘要:介绍zeppelin主要有以下功能数据提取数据发现数据分析数据可视化目前版本(0.5-0.6)之前支持的数据搜索引擎有如下安装环境 centOS 6.6编译准备工作 sudo yum updatesudo yum install openjdk-7-jdksudo yum ins... 阅读全文

posted @ 2015-08-14 22:11 张云临 阅读(234) 评论(0) 推荐(0) 编辑

kafka0.8.2以下版本删除topic
摘要:一些说明kafka0.8.2及以上版本已经支持delete命令删除topic,可是之前的版本要是想删除topic还是要费一番手脚,绝对是个体力活。。。该方法最好仅在线下开发环境中使用,毕竟要重启zookeeper和broker步骤1.在zk中删除topic信息(test)$KAFK... 阅读全文

posted @ 2015-08-14 21:47 张云临 阅读(197) 评论(0) 推荐(0) 编辑

kafka迁移数据目录
摘要:问题先前存储kafka日志的磁盘空间太小,zabbix警报不断,于是加了磁盘,将日志存到新磁盘上。解决方案依次在每台机器上操作,保证有机器能响应producer和consumer的操作。 加磁盘需要重启服务器。1. 拷贝日志服务器启动后,将以前的日志拷贝到新目录cp /data/k... 阅读全文

posted @ 2015-08-13 17:20 张云临 阅读(1575) 评论(0) 推荐(0) 编辑

scala2.10.x case classes cannot have more than 22 parameters
摘要:问题这个错误出现在case class参数超出22个的时候。case classes cannot have more than 22 parameters在scala 2.11.x版本以下时case class 的参数最多为22个,如果超过这个参数又不能升级时(比如目前spark... 阅读全文

posted @ 2015-08-12 22:40 张云临 阅读(191) 评论(0) 推荐(0) 编辑

opscenter dashboard排错
摘要:系统环境opscenter 5.2 centOS 6.6 cassandra 2.0.x问题opscenter上的dashboard监控cassandra集群一段时间(大约1天)后总会停止显示。然而在cassandra节点上发现datastax-agent进程还是好好的在运行着。之... 阅读全文

posted @ 2015-08-10 10:03 张云临 阅读(125) 评论(0) 推荐(0) 编辑

kafka监控工具kafkaOffsetMoniter的使用
摘要:简介KafkaOffsetMonitor是由Kafka开源社区提供的一款Web管理界面,用来实时监控Kafka的Consumer以及Partition中的Offset,可以在web界面直观的看到每个Partition的Message的增长速度,是否消费,是否阻塞等。使用如果不想编译... 阅读全文

posted @ 2015-08-07 17:45 张云临 阅读(211) 评论(0) 推荐(0) 编辑

SparkSQL JSON数据操作(1.3->1.4)
摘要:1.用户自定义schemadatajson串格式如下:{ "partner_code": "demo", "app_name": "web", "person_info": { "name": "张三", "age": 18 },... 阅读全文

posted @ 2015-08-05 23:00 张云临 阅读(271) 评论(0) 推荐(0) 编辑

kafka管理器kafka-manager部署安装
摘要:运行的环境要求Kafka 0.8.1.1+sbt 0.13.xJava 7+功能为了简化开发者和服务工程师维护Kafka集群的工作,yahoo构建了一个叫做Kafka管理器的基于Web工具,叫做 Kafka Manager。这个管理工具可以很容易地发现分布在集群中的哪些topic分... 阅读全文

posted @ 2015-08-05 17:02 张云临 阅读(569) 评论(0) 推荐(0) 编辑

Kafka集群模式部署
摘要:环境:kafka 0.8.1.1基本概念Kafka维护按类区分的消息,称为主题(topic)生产者(producer)向kafka的主题发布消息消费者(consumer)向主题注册,并且接收发布到这些主题的消息kafka以一个拥有一台或多台服务器的集群运行着,每一台服务器称为bro... 阅读全文

posted @ 2015-08-05 10:39 张云临 阅读(335) 评论(0) 推荐(0) 编辑

将cantk runtime嵌入到现有的APP中
摘要:1,先取cantk-runtime-demos到本地:git clone https://github.com/drawapp8/cantk-runtime-demos2,创建一个Android App(或者拷贝现有的项目):cd cantk-runtime-demosandroi... 阅读全文

posted @ 2015-08-03 11:54 张云临 阅读(150) 评论(0) 推荐(0) 编辑

导航

点击右上角即可分享
微信分享提示