摘要： 最近在搞人脸识别，下载数据集走得比较心累。很多数据集太大了。没有啥标签。先搞一个小的玩玩。还找到的是pgm灰度图。索性写了个小脚本，用来转换。同时写脚本打标签。 数据集地址：http://download.csdn.net/detail/u014609362/7804183#comment 代码附上 阅读全文

摘要： g++4.6编译是报错： 这时，配置是讲语言设置为c,c++即可。如下： ./configure --prefix=/usr/local/gcc-4.6.1 -enable-threads=posix -disable-checking -disable-multilib -enable-langu 阅读全文

摘要： 编译cblas时报错，这时，修改Makefile.in中的编译文件中的g77为gfortran 阅读全文

摘要： 具体报错信息很长的。 text._ZN5boost16exception_detail10bad_alloc_D2Ev[_ZN5boost16exception_detail10bad_alloc_D5Ev] of .build_release/src/caffe/data_reader.o 报了这 阅读全文

摘要： 最近想玩druid.druid的底层是fastbit索引的列式存储。采用分布式的zookeeper调度。实时大数据分析软件。主要针对OLAP操作。 搭环境搭环境。druid的核心成员成立了一个叫imply.io的公司。我就直接下载了imply.io。 它是四个软件的集成。包括druid,plywoo 阅读全文

摘要： spark-submit 报错：must specify resource取消关注|1...我的submit.sh内容：/bin/spark-submit \--class abc.package.manclass \--master spark:10.30.40.50:7077 \--execut... 阅读全文

摘要： 最近在搞spark机器学习项目时，碰到了一些小问题。两个数据集要联到一起。比如rdd1=("abc","cde","dfc"),rdd2=(1,2,3)要连接成rdd3=(("abc",1),("cde",2),("dfc",3)),当然，小数据集的时候用zip就可以了。大数据集的时候就有问题了。每... 阅读全文

摘要： 话不多说。直接上代码咯。欢迎交流。/** * Created by whuscalaman on 1/7/16. */import org.apache.spark.{SparkConf, SparkContext}import org.apache.spark.mllib.classifica... 阅读全文

摘要： ERROR SparkUncaughtExceptionHandler: Uncaught exception in threadThread[appclient-registration-retry-thread,5,main] java.util.concurrent.RejectedExecu... 阅读全文

摘要： 最近重新搭了spark环境。在Master上使用了IDEA来写代码。确实很方便。我用的是hadoop2.6.spark1.5.1forhadoop2.6.scala之前用的是2.11.0老是报这个错。就是在setMaster的时候就报错了。感觉是底层语言的截取字符串的问题。后来换了一个scala的版... 阅读全文