02 2016 档案

摘要:此文摘录自《数据仓库工具箱:维度建模的完全指南》 Mistake 10: Place text attributes used for constraining and grouping in a fact table. The process of creating a dimensional m 阅读全文
posted @ 2016-02-24 13:48 finalboss1987 阅读(409) 评论(0) 推荐(0)
摘要:sqoop即SQL-to-Hadoop,是一个把数据从关系型数据库导入到Hadoop系统中的工具(HDFS,HIVE和HBase),也可以将数据从Hadoop导入到关系型数据库。本文以sqoop 1.99.6版本为例演示如何配置和使用sqoop。 1. 从Apache网上下载sqoop http:/ 阅读全文
posted @ 2016-02-19 11:49 finalboss1987 阅读(990) 评论(0) 推荐(0)
摘要:注:该文内容部分来源于ChinaHadoop.cn上的hadoop视频教程。 一. HDFS概述 HDFS即Hadoop Distributed File System, 源于Google发表于2003年的论文,是一种分布式的文件系统。 HDFS优点: 高容错性(数据自动保存多个副本) 适合批处理 阅读全文
posted @ 2016-02-16 11:13 finalboss1987 阅读(847) 评论(0) 推荐(0)
摘要:1. 统计一个目录下文件个数 2. 直接查看压缩文件内容 3. 将所有压缩文件内容输出到某一文件内 4. 查看磁盘空间 5. 查看某一文件夹空间 阅读全文
posted @ 2016-02-01 20:44 finalboss1987 阅读(158) 评论(0) 推荐(0)