02 2017 档案

Apache Hive处理数据示例
摘要:继上一篇 "文章" 介绍如何使用Pig处理HDFS上的数据,本文将介绍使用Apache Hive进行数据查询和处理。 Apache Hive简介 首先Hive是一款数据仓库软件 使用HiveQL来结构化和查询存放的数据 执行环境:MapReduce, Tez, Spark 数据存放:HDFS, HB 阅读全文

posted @ 2017-02-22 23:36 camash 阅读(1118) 评论(1) 推荐(0)

Apache Pig处理数据示例
摘要:Apache Pig是一个高级过程语言,可以调用MapReduce查询大规模的半结构化数据集。 样例执行的环境为cloudera的单节点虚拟机 读取结构数据中的指定列 在hdfs上放置一个文件 启动Apache Pig 使用Pig Latin进行数据提取 其中dump的作用是将内容转存到屏幕。 将结 阅读全文

posted @ 2017-02-22 14:11 camash 阅读(679) 评论(0) 推荐(0)

Oracle数据库死锁和MySQL死锁构造和比较
摘要:最近在复习数据库的事务隔离性,顺便构造了一下在Oracle上和MySQL上的死锁以比较异同。 在Oracle上面的实验 在Oracle中,因为是显式提交,所以默认可以认为在一个会话中若没有使用 进行提交,则可以认为在同一个事务里面 首先构造测试用表 开两个窗口形成死锁 同时这个过程中,可以在第三会话 阅读全文

posted @ 2017-02-17 00:45 camash 阅读(631) 评论(0) 推荐(0)

导航