摘要： g++4.6编译是报错： 这时，配置是讲语言设置为c,c++即可。如下： ./configure --prefix=/usr/local/gcc-4.6.1 -enable-threads=posix -disable-checking -disable-multilib -enable-langu 阅读全文

摘要： 编译cblas时报错，这时，修改Makefile.in中的编译文件中的g77为gfortran 阅读全文

摘要： 具体报错信息很长的。 text._ZN5boost16exception_detail10bad_alloc_D2Ev[_ZN5boost16exception_detail10bad_alloc_D5Ev] of .build_release/src/caffe/data_reader.o 报了这 阅读全文

摘要： 最近想玩druid.druid的底层是fastbit索引的列式存储。采用分布式的zookeeper调度。实时大数据分析软件。主要针对OLAP操作。 搭环境搭环境。druid的核心成员成立了一个叫imply.io的公司。我就直接下载了imply.io。 它是四个软件的集成。包括druid,plywoo 阅读全文

摘要： spark-submit 报错：must specify resource取消关注|1...我的submit.sh内容：/bin/spark-submit \--class abc.package.manclass \--master spark:10.30.40.50:7077 \--execut... 阅读全文

摘要： 最近在搞spark机器学习项目时，碰到了一些小问题。两个数据集要联到一起。比如rdd1=("abc","cde","dfc"),rdd2=(1,2,3)要连接成rdd3=(("abc",1),("cde",2),("dfc",3)),当然，小数据集的时候用zip就可以了。大数据集的时候就有问题了。每... 阅读全文

摘要： 话不多说。直接上代码咯。欢迎交流。/** * Created by whuscalaman on 1/7/16. */import org.apache.spark.{SparkConf, SparkContext}import org.apache.spark.mllib.classifica... 阅读全文

摘要： ERROR SparkUncaughtExceptionHandler: Uncaught exception in threadThread[appclient-registration-retry-thread,5,main] java.util.concurrent.RejectedExecu... 阅读全文

摘要： 最近重新搭了spark环境。在Master上使用了IDEA来写代码。确实很方便。我用的是hadoop2.6.spark1.5.1forhadoop2.6.scala之前用的是2.11.0老是报这个错。就是在setMaster的时候就报错了。感觉是底层语言的截取字符串的问题。后来换了一个scala的版... 阅读全文

摘要： 今天一个小伙伴找我搞spark,搞了一个中午都没搭建好。心里痒痒的。索性自己重来了一遍。本来很简单的事情，被这小子搞的老复杂了。究其原因，有以下几点：下载的软件不对，我用的是这两个软件spark-1.5.1-bin-hadoop2.6.tgzhadoop-2.6.0.tar.gz当然还需要基础的ja... 阅读全文