随笔分类 -  Distributed

摘要:为当前用户创建定时任务,让程序在特定时间自动执行。 1. 首先 输入 crontab -e 编辑crontab服务文件 例如:文件内容如下 #00 */1 * * * cd /home/work/lihehan/qubuild/extra; sh build.sh 1>>err.log 2>&1 0 阅读全文
posted @ 2016-04-25 17:16 小白菜的BLOG 阅读(162) 评论(0) 推荐(0)
摘要:spark1.0.0下使用scala实现机器学习算法,包括分类、回归、聚类、协同过滤以及降维等。 阅读全文
posted @ 2014-06-16 17:48 小白菜的BLOG 阅读(6312) 评论(2) 推荐(1)
摘要:spark1.0.0 集群 Standalone Applications scala sbt 阅读全文
posted @ 2014-06-11 17:21 小白菜的BLOG 阅读(2457) 评论(0) 推荐(0)
摘要:现在大家可以跟我一起来实现Ubuntu 12.04下Hadoop 2.2.0 集群搭建,在这里我使用了两台服务器,一台作为master即namenode主机,另一台作为slave即datanode主机,增加更多的slave只需重复slave部分的内容即可。系统版本:master:Ubuntu 12.... 阅读全文
posted @ 2014-06-10 09:49 小白菜的BLOG 阅读(4035) 评论(0) 推荐(0)