hadoop - 随笔分类 - wEndu

关于论文研究内容的选择

摘要：2016-11-23 算法与数学之美1、关于论文研究内容的选择（1）博士论文研究是针对特定领域的未解决问题的研究，通过研究提出和验证解决这个问题的新理论新方法新模式。论文的创新性贡献一定是解决别人还没有解决、或者在某些方面解决得不好的问题。（2）因此，学生在文献综述分析的基础上必须首先回答：在这个领阅读全文

posted @ 2016-11-26 17:48 wEndu 阅读(688) 评论(0) 推荐(0)

shell启动hadoop集群

摘要：原创，转载请注明。谢谢 shell启动hadoop集群1：明确启动顺序 1）启动zookeeper集群（分别在centos 4-02，centos6-02，centos7-02） app/zookeeper-3.4.5/bin/zkServer.sh start //启动进程 app/zookeep 阅读全文

posted @ 2016-11-06 22:45 wEndu 阅读(1001) 评论(0) 推荐(0)

电信行业数据分析服务（转）

摘要：电信行业数据分析服务（转）转自https://www.douban.com/note/516353031/?type=rec&qq-pf-to=pcqq.group 数据分析服务 2015-09-10 09:55:19 电信行业数据分析服务（转）转自https://www.douban.com/ 阅读全文

posted @ 2016-10-21 14:52 wEndu 阅读(591) 评论(0) 推荐(0)

Mahout学习之Mahout简介、安装、配置、入门程序测试

摘要：Mahout学习之Mahout简介、安装、配置、入门程序测试标签： mahout 学习 mahout | 发表时间：2014-04-27 10:56 | 作者：wl101yjx 分享到：出处：http://blog.csdn.net 分享到：一、Mahout简介查了Mahout的中文意思—— 阅读全文

posted @ 2016-10-18 13:31 wEndu 阅读(261) 评论(0) 推荐(0)

MR输出结果乱码问题

摘要：今天在用hadoop的MR框架处理一些数据，出现了输出结果是乱码的问题，如图：问题解决中。。。。。。找到一篇博文源地址：http://note.youdao.com/share/?id=04678102d70bae8334b26df2c9c4a961&type=note#/ 输入是GBK文件, 阅读全文

posted @ 2016-09-25 17:14 wEndu 阅读(559) 评论(0) 推荐(0)

MapperReduce_WordCount

摘要：// 原因：导错包了！删掉重新导入阅读全文

posted @ 2016-09-24 20:44 wEndu 阅读(290) 评论(0) 推荐(0)

hadoop集群上传60G文件传输到20多G失去传输连接

摘要：问题如下：目前还没找出问题原因，正在想法解决中。。。。。。有报错信息看出问题出在172.16.6.2机器上，而60g的大文件也在此机器上。centos6-02作为journalnode和zookeeper的节点没有启动进程。所以接下来试试把journalnode和zookeeper进程启动一下试试看... 阅读全文

posted @ 2016-09-22 20:42 wEndu 阅读(176) 评论(0) 推荐(0)

随笔分类 - hadoop