摘要：Hive 是基于Hadoop 构建的一套数据仓库分析系统，它提供了丰富的SQL查询方式来分析存储在Hadoop 分布式文件系统中的数据，可以将结构化的数据文件映射为一张数据库表，并提供完整的SQL查询功能，可以将SQL语句转换为MapReduce任务进行运行，通过自己的SQL 去查询分析需要的内容， 阅读全文
Hive SQL的编译过程
2017-07-07 22:40 by GarfieldEr007, 966 阅读, 0 推荐, 收藏,
摘要：Hive是基于Hadoop的一个数据仓库系统，在各大公司都有广泛的应用。美团数据仓库也是基于Hive搭建，每天执行近万次的Hive ETL计算流程，负责每天数百GB的数据存储和分析。Hive的稳定性和性能对我们的数据分析非常关键。 在几次升级Hive的过程中，我们遇到了一些大大小小的问题。通过向社区 阅读全文
hive参数——深入浅出学Hive
2017-07-07 22:38 by GarfieldEr007, 358 阅读, 0 推荐, 收藏,
摘要：第一部分：Hive 参数 hive.exec.max.created.files •说明：所有hive运行的map与reduce任务可以产生的文件的和 •默认值:100000 hive.exec.max.created.files •说明：所有hive运行的map与reduce任务可以产生的文件的和 阅读全文
Hive JDBC——深入浅出学Hive
2017-07-07 22:37 by GarfieldEr007, 308 阅读, 0 推荐, 收藏,
摘要：第一部分：搭建Hive JDBC开发环境 搭建：Steps •新建工程hiveTest •导入Hive依赖的包 •Hive 命令行启动Thrift服务 •hive --service hiveserver & 第二部分：基本操作对象的介绍 Connection •说明：与Hive连接的Connect 阅读全文
Hive 内建操作符与函数开发——深入浅出学Hive
2017-07-07 22:36 by GarfieldEr007, 593 阅读, 0 推荐, 收藏,
摘要：第一部分：关系运算 Hive支持的关系运算符 Hive支持的关系运算符 •常见的关系运算符 •等值比较: = •不等值比较: <> •小于比较: < •小于等于比较: <= •大于比较: > •大于等于比较: >= •空值判断: IS NULL •非空判断: IS NOT NULL •LIKE比较: 阅读全文
Hive安装与配置——深入浅出学Hive
2017-07-07 22:35 by GarfieldEr007, 283 阅读, 0 推荐, 收藏,
摘要：第一部分：软件准备与环境规划 Hadoop环境介绍 •Hadoop安装路径 •/home/test/Desktop/hadoop-1.0.0/ •Hadoop 元数据存放目录 •/home/test/data/core/namenode •Hadoop 数据存放路径 •/home/test/data 阅读全文
Hive QL——深入浅出学Hive
2017-07-07 22:33 by GarfieldEr007, 405 阅读, 0 推荐, 收藏,
摘要：第一部分：ＤＤＬ DDL DDL •建表 •删除表 •修改表结构 •创建／删除视图 •创建数据库 •显示命令 建表 CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name [(col_name data_type [COMMENT col_comment 阅读全文
ConcurrentHashMap源码剖析
2017-07-07 22:13 by GarfieldEr007, 186 阅读, 0 推荐, 收藏,
摘要：原文出处： 我爱物联网 ConcurrentHashMap是Java5中新增加的一个线程安全的Map集合，可以用来替代HashTable。对于ConcurrentHashMap是如何提高其效率的，可能大多人只是知道它使用了多个锁代替HashTable中的单个锁，也就是锁分离技术（Lock Strip 阅读全文
ConcurrentHashMap总结
2017-07-07 22:12 by GarfieldEr007, 2452 阅读, 1 推荐, 收藏,
摘要：原文出处： Hosee 并发编程实践中，ConcurrentHashMap是一个经常被使用的数据结构，相比于Hashtable以及Collections.synchronizedMap()，ConcurrentHashMap在线程安全的基础上提供了更好的写并发能力，但同时降低了对读一致性的要求（这点 阅读全文
探索 ConcurrentHashMap 高并发性的实现机制
2017-07-07 22:11 by GarfieldEr007, 231 阅读, 0 推荐, 收藏,
摘要：简介 ConcurrentHashMap 是 util.concurrent 包的重要成员。本文将结合 Java 内存模型，分析 JDK 源代码，探索 ConcurrentHashMap 高并发的具体实现机制。 由于 ConcurrentHashMap 的源代码实现依赖于 Java 内存模型，所以阅 阅读全文
浙公网安备 33010602011771号