摘要：
环境：shark(0.11分支编译)+spark 0.8+hive 0.11(编译)+hadoop 2.00 cdh4.4 用sharkserver的方式执行一段时间后，通过kit-b8连接到kit-b5的sharkserver上，执行时报以下错误： Hive history file=/tmp/hadoop/hive_job_log_hadoop_48828@kit-b8_201402180... 阅读全文
摘要：
环境：SQL Server 2005 Analysis Services + OWC 1.1 +Win 7 准备： 1、在SQL Server 2005 Analysis Services建好olap数据库。 2、OWC连接SQL Server 2005 Analysis Services 有两种方式：A、直接连Analysis Services数据库;B、通过IIS的http端口访问。如果用二... 阅读全文
摘要：
一、获取hive 0.11文件 1、直接在apache网站下载release版 2、自己下载源码编译。方法： git clone https://github.com/amplab/hive.git -b shark-0.11 git_hive-0.11_shark cd git_hive-0.11_shark ant package 因为我是为了后面和shark一起用,apac... 阅读全文
摘要：
错误信息： scala> val file = sc.textFile("hdfs://kit-b5:9000/input/README.txt") 13/10/29 16:59:45 DEBUG MutableMetricsFactory: field org.apache.hadoop.metrics2.lib.MutableRate org.apache.hadoop.security.... 阅读全文
摘要：
1、profile export SCALA_HOME=/home/hadoop/scala-2.9.3SPARK_080=/home/hadoop/spark-0.8.0export SPARK_HOME=$SPARK_080export SPARK_EXAMPLES_JAR=$SPARK_HOME/examples/target/spark-examples_2.9.3-0.8.0-inc... 阅读全文
摘要：
package kit.weka; import weka.classifiers.Evaluation; import weka.classifiers.functions.LinearRegression; import weka.core.Instance; import weka.core.Instances; import w... 阅读全文
摘要：
package kit.weka; /** * desc:试试Weka的决策树类 * J48Test * */ import java.io.File; import java.io.IOException; import weka.classifiers.Classifier; import weka.classifiers.trees.J... 阅读全文
摘要：
Hadoop-cdh4下载地址： http://www.cloudera.com/content/cloudera-content/cloudera-docs/CDHTarballs/3.25.2013/CDH4-Downloadable-Tarballs/CDH4-Downloadable-Tarballs.html 一、建立linux用户 添加组：groupadd hadoopgr... 阅读全文
摘要：
package kit.weka; import java.io.File;import weka.classifiers.CheckClassifier;import weka.classifiers.Classifier;import weka.classifiers.Evaluation;import weka.classifiers.evaluation.*;import weka.cor... 阅读全文
摘要：
一、添加用户（各机器均一致） 添加组： sudo addgroup hadoop 添加用户并到组：sudo adduser -ingroup hadoop hadoop 二、ssh无验证登陆 1、用hadoop登陆，执行： ssh-keygen -t rsa -P "" cat .ssh/id_rsa.pub >> .ssh/aut... 阅读全文