摘要：1.问题背景 设计到几十张数据库表，每张表有几万到十几万数据不等，现在需要尽可能快的导出excel数据。 2.遇到的问题及解决思路 2.1 数据量大，生成速度慢。下载的文件太大。 使用多线程下载，一个表的数据分配一条线程，全部下载完成压缩成一个zip文件。 2.2 单表数据过多超过excel的条数据 阅读全文

摘要：1.hbase的数据模型介绍 1.1hbase的数据模型图 1.1.1行键row key rowkey相当于数据库的主键，用来检索hbase中的行，Row key行键 (Row key)可以是任意字符串(最大长度 是 64KB，实际应用中长度一般为 10- 100bytes)，在HBASE内部，ro 阅读全文

摘要：1.hbase简介 1.1 什么是hbase HBASE是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，HBASE的目标是存储并处理大型的数据，仅需使用普通的硬件配置，就能够处理由成千上万的行和列所组成的大型数据。HBASE利用HDFS作为其文件存储系统，利用Zookeeper作协同服务，可 阅读全文