摘要: 前提你得安装有Hadoop 我的版本hadoop2.3-cdh5.1.01、下载maven包2、配置M2_HOME环境变量,配置maven 的bin目录到path路径3、export MAVEN_OPTS="-Xmx2g -XX:MaxPermSize=512M -XX:ReservedCodeCa... 阅读全文
posted @ 2014-08-27 17:07 在路上....... 阅读(1481) 评论(0) 推荐(0) 编辑
摘要: 部署spark集群使用spark包spark-1.0.2-bin-hadoop2.tgz在spark-shell和java -jar访问hadoop hdfs上的文件写法是有区别的在spark-shell直接使用/user/ning/1.txt 之类的路径,不用加hdfs://host:port 的... 阅读全文
posted @ 2014-08-24 07:26 在路上....... 阅读(1466) 评论(0) 推荐(0) 编辑
摘要: 今天碰到的一个 spark问题,困扰好久才解决首先我的spark集群部署使用的部署包是官方提供的spark-1.0.2-bin-hadoop2.tgz部署在hadoop集群上。在运行java jar包的时候使用命令java -jar chinahadoop-1.0-SNAPSHOT.jar chin... 阅读全文
posted @ 2014-08-24 07:20 在路上....... 阅读(7552) 评论(1) 推荐(1) 编辑
摘要: jquery mutilselect默认只能根据设置的option来进行自动提示$.each(availableTags, function(key, value) { $('#channels') .append($("") .... 阅读全文
posted @ 2014-07-25 16:59 在路上....... 阅读(477) 评论(0) 推荐(0) 编辑
摘要: 一、简介和安装 ./bin/mongod --dbpath /path/to/database --logpath /path/to/log --fork --port 27017 mongodb非常的占磁盘空间, 刚启动后要占3-4G左右,--smallfiles二、基本命令 1... 阅读全文
posted @ 2014-06-27 13:35 在路上....... 阅读(284) 评论(0) 推荐(1) 编辑
摘要: Apache Pig中文教程集合: http://www.codelast.com/?p=4550#more-4550 阅读全文
posted @ 2014-06-18 15:53 在路上....... 阅读(152) 评论(0) 推荐(0) 编辑
摘要: 可以自己从官网编译打包也可以直接下载官网的.gz包。自己编译打包的过程如下:1、查看是否安装cmake、svn、openssl、ncurses,没有的直接安装上yum list|grep cmakeyum list |grep ncursesyum install -y ncurses.i386 n... 阅读全文
posted @ 2014-05-19 15:26 在路上....... 阅读(181) 评论(0) 推荐(0) 编辑