meiLinYa - 博客园

摘要： FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(message:For direct MetaStore DB conn... 阅读全文

posted @ 2018-07-09 08:26 meiLinYa 阅读(689) 评论(0) 推荐(0)

摘要： MapRdeuce&Yarn的工作机制一幅图解决你所有的困惑那天在集群中跑一个MapReduce的程序时，在机器上jps了一下发现了每台机器中有好多个YarnChild。困惑什么时Ya... 阅读全文

posted @ 2018-07-06 08:40 meiLinYa 阅读(1840) 评论(0) 推荐(0)

摘要： Hive介绍及安装介绍： Hive是基于Hadoop的数据仓库解决方案。由于Hadoop本身在数据存储和计算方面有很好的可扩展... 阅读全文

posted @ 2018-07-05 19:56 meiLinYa 阅读(187) 评论(0) 推荐(0)

摘要：海量日志采集Flume(HA)1.介绍: Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume... 阅读全文

posted @ 2018-07-04 20:57 meiLinYa 阅读(571) 评论(0) 推荐(0)

摘要：数组数组使应用最广泛的数据存储结构。它被植入到大部分编程语言中用我的理解来说说数组吧。就行胡萝卜填坑一... 阅读全文

posted @ 2018-07-04 09:45 meiLinYa 阅读(266) 评论(0) 推荐(0)

摘要：综述数据结构和算法数据结构和算发的作用：数据结构是对在计算机内存中(又时在磁盘中)的数据的一种安排，数据结构包括数组，栈，二叉树，哈希表等等。苏算法... 阅读全文

posted @ 2018-07-04 08:31 meiLinYa 阅读(145) 评论(0) 推荐(0)

摘要： MapRedcue的演示（协同过滤）做一个关于电影推荐。你于你好友之间的浏览电影以及电影评分的推荐的协同过滤。百度百科：协同过滤简单来说是利用某兴趣相投、拥有共同经验之群体的喜好来... 阅读全文

posted @ 2018-07-02 15:18 meiLinYa 阅读(368) 评论(0) 推荐(0)

摘要： MapReduce的倒排索引索引：什么是索引：索引（Index）是帮助数据库高效获取数据的数据结构。索引是在基于数据库表创建的，它包含一个表中某些列的值以及记录对应的地址，... 阅读全文

posted @ 2018-06-29 14:14 meiLinYa 阅读(140) 评论(0) 推荐(0)

摘要：前言本文是在讲述什么样的数据结构适合作为索引，以及其适合作为索引的原因。而阅读本文需要对B树和B+树结构有稍微的理解。以及需要对磁盘操作知识有稍微的了解。对于磁盘操作的相关知识，在文章尾部的链接文章中，有详细的介绍。在MySQL中，主要有四种类型的索引，分别为：B-T... 阅读全文

posted @ 2018-06-29 11:19 meiLinYa 阅读(208) 评论(0) 推荐(0)

摘要： MapReduce的（五）1.MapReduce的多表关联查询。根据文本数据格式。查询多个文本中的内容关联。查询。2.MapReduce的多任务窜执... 阅读全文

posted @ 2018-06-29 11:10 meiLinYa 阅读(206) 评论(0) 推荐(0)