2017 年 2月随笔档案 - 无尽的缥缈

转:oracle驱动表

摘要：以一个比较两本字典来做例子: 一本字典有索引目录(dict a), 一本没有(dict b) 现在要找出所有a开头的单词的异同那么比较的时候,你会怎么比较? 合理的做法应该是以没有索引的字典dict b开始, 找到a开头的那一页, 然后对于每个单词, 通过使用索引在dict a中找到相应的条目如阅读全文

posted @ 2017-02-21 11:23 无尽的缥缈阅读(1892) 评论(0) 推荐(0)

转:走近NoSQL数据库的四大家族

摘要：在目前的企业IT架构中，系统管理员以及DBA都会考虑使用NoSQL数据库来解决RDBMS所不能解决的问题，特别是互联网行业。传统的关系型数据库主要以表(table)的形式来存储数据，而无法应对非结构化数据的挑战。在进行数据标准化的过程中，关系型数据库性能遭遇了瓶颈。 NoSQL顾名思义就是Not-O 阅读全文

posted @ 2017-02-16 16:40 无尽的缥缈阅读(317) 评论(0) 推荐(0)

转:Hive性能优化之ORC索引–Row Group Index vs Bloom Filter Index

摘要：之前的文章《更高的压缩比，更好的性能–使用ORC文件格式优化Hive》中介绍了Hive的ORC文件格式，它不但有着很高的压缩比，节省存储和计算资源之外，还通过一个内置的轻量级索引，提升查询的性能。这个内置的轻量级索引，就是下面所说的Row Group Index。其实ORC支持的索引不止这一种，还阅读全文

posted @ 2017-02-16 13:50 无尽的缥缈阅读(2838) 评论(0) 推荐(0)

转: 更高的压缩比，更好的性能–使用ORC文件格式优化Hive

摘要：Hive从0.11版本开始提供了ORC的文件格式，ORC文件不仅仅是一种列式文件存储格式，最重要的是有着很高的压缩比，并且对于MapReduce来说是可切分（Split）的。因此，在Hive中使用ORC作为表的文件存储格式，不仅可以很大程度的节省HDFS存储资源，而且对数据的查询和处理性能有着非常大阅读全文

posted @ 2017-02-16 13:43 无尽的缥缈阅读(1154) 评论(0) 推荐(0)

转：大数据时代快速SQL引擎-Impala

摘要：本文来自：http://blog.csdn.net/yu616568/article/details/52431835 如有侵权可立即删除背景随着大数据时代的到来，Hadoop在过去几年以接近统治性的方式包揽的ETL和数据分析查询的工作，大家也无意间的想往大数据方向靠拢，即使每天数据也就几十、阅读全文

posted @ 2017-02-13 16:51 无尽的缥缈阅读(4999) 评论(0) 推荐(0)

转: OLAP引擎——Kylin介绍

摘要：本文转自：http://blog.csdn.net/yu616568/article/details/48103415 ，如有侵犯，立刻删除。 Kylin是ebay开发的一套OLAP系统，与Mondrian不同的是，它是一个MOLAP系统，主要用于支持大数据生态圈的数据分析业务，它主要是通过预计算的阅读全文

posted @ 2017-02-13 11:26 无尽的缥缈阅读(969) 评论(0) 推荐(0)

oracle索引-二元高度

摘要：本文转载作为数据库管理员来说，要在表上建立索引很简单。但是要知道这个索引是否合适、如何优化索引则就具有一定的难度。这项工作也是用来评价一个数据库管理员是否算得上专家的一个重要指标。那么为什么索引优化有这么大的难度呢?这主要是因为索引优化是考察一个数据库管理员经验的时候。笔者今天就跟大家分享一下这方阅读全文

posted @ 2017-02-07 14:25 无尽的缥缈阅读(620) 评论(0) 推荐(0)

oracle Data blocks，Extents，Segments

摘要：转载先看Data blocks（也叫逻辑块，oracle块，页）吧，oracle存储数据都是在这些数据块中，一个数据块是磁盘上数据库物理空间一系列物理字节的组成。比Data blocks更高一层的逻辑数据块空间是extent，一个extent是由一系列临近的存储信息的数据块组成。最高一层的逻辑阅读全文

posted @ 2017-02-06 18:24 无尽的缥缈阅读(881) 评论(0) 推荐(0)

Oracle Index Clustering Factor(集群因子)

摘要：一、本文说明：今天在做测试的时候发现字段上有索引，但是执行计划就是不走索引，经过在网上查找才发现原来是索引的集群因子过高导致的。本文属于转载二、官网说明 The index clustering factor measures row order in relation to an indexe 阅读全文

posted @ 2017-02-06 17:51 无尽的缥缈阅读(962) 评论(0) 推荐(0)