03 2014 档案

[牛感悟系列]JAVA（1）理解JAVA垃圾回收
摘要：简明介绍JAVA中的垃圾回收机制。需要知道更多信息请私信博主。 阅读全文
posted @ 2014-03-27 16:50 高翔DC 阅读(1139) 评论(2) 推荐(2)
[大牛翻译系列]Hadoop系列性能部分完结
摘要：Hadoop系列性能部分完结。其它的部分发布时间待定。Hadoop系列将不再一日一篇，开始不定期发布。 阅读全文
posted @ 2014-03-26 10:41 高翔DC 阅读(578) 评论(0) 推荐(0)
[大牛翻译系列]Hadoop（22）附录D.2 复制连接框架
摘要：来自于某本大牛英文专著。翻译稿。 讲解以减少map开销为目的的自定义的连接框架。（这是整理稿。原来和另一篇合并在一起，现在单列出来。） 阅读全文
posted @ 2014-03-25 05:37 高翔DC 阅读(1314) 评论(0) 推荐(0)
[大牛翻译系列]Hadoop（21）附录D.1 优化后的重分区框架
摘要：来自于某本大牛英文专著。翻译稿。 讲解以减少reduce开销为目的的自定义的重分区框架。（这是整理稿。原来和另一篇合并在一起，现在单列出来。） 阅读全文
posted @ 2014-03-24 11:29 高翔DC 阅读(1441) 评论(0) 推荐(0)
[大牛翻译系列]Hadoop（20）附录A.10 压缩格式LZOP编译安装配置
摘要：来自于某本大牛英文专著。翻译稿。 讲解如何在Hadoop中编译安装配置压缩格式LZOP。 阅读全文
posted @ 2014-03-23 06:26 高翔DC 阅读(1332) 评论(0) 推荐(0)
[大牛翻译系列]Hadoop（19）MapReduce 文件处理：基于压缩的高效存储（二）
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的文件处理。介绍如何有效地进行压缩，包括如何选择压缩格式，如何在HDFS，MapReduce，Pig，Hive中压缩超大的文件，处理需要分块的压缩格式，如LZOP格式。 阅读全文
posted @ 2014-03-22 07:44 高翔DC 阅读(1793) 评论(0) 推荐(2)
[大牛翻译系列]Hadoop（18）MapReduce 文件处理：基于压缩的高效存储（一）
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的文件处理。介绍如何有效地进行压缩，包括如何选择压缩格式，如何在HDFS，MapReduce，Pig，Hive中压缩较小的文件。 阅读全文
posted @ 2014-03-21 06:28 高翔DC 阅读(3978) 评论(0) 推荐(1)
[大牛翻译系列]Hadoop（17）MapReduce 文件处理：小文件
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的文件处理。介绍如何有效地处理小文件。 阅读全文
posted @ 2014-03-20 06:47 高翔DC 阅读(4654) 评论(0) 推荐(1)
[大牛翻译系列]Hadoop（16）MapReduce 性能调优：优化数据序列化
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的性能调优。介绍如何优化数据序列化。 阅读全文
posted @ 2014-03-19 08:03 高翔DC 阅读(1854) 评论(0) 推荐(0)
[大牛翻译系列]Hadoop（15）MapReduce 性能调优：优化MapReduce的用户JAVA代码
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的性能调优。介绍如何优化用户JAVA代码。 （要是文章或图片有不明确的地方，可以在文章后面留言，我会回复的。） 阅读全文
posted @ 2014-03-18 06:23 高翔DC 阅读(2390) 评论(0) 推荐(1)
[大牛翻译系列]Hadoop 翻译文章索引
摘要：Hadoop翻译系列文章的索引 阅读全文
posted @ 2014-03-17 09:53 高翔DC 阅读(1736) 评论(0) 推荐(0)
[大牛翻译系列]Hadoop（14）MapReduce 性能调优：减小数据倾斜的性能损失
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的性能调优。介绍如何减小数据倾斜的性能损失。 （要是文章有不明确的地方，可以在文章后面留言，我会回复的。） 阅读全文
posted @ 2014-03-16 11:44 高翔DC 阅读(4748) 评论(0) 推荐(2)
[大牛翻译系列]Hadoop（13）MapReduce 性能调优：优化洗牌（shuffle）和排序阶段
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的性能调优。介绍如何优化map阶段和reduce阶段之间的洗牌和排序。 （要是文章或者图片有不明确的地方，可以在文章后面留言，我会回复的。） 阅读全文
posted @ 2014-03-15 06:39 高翔DC 阅读(3647) 评论(0) 推荐(2)
[大牛翻译系列]Hadoop（12）MapReduce 性能调优：诊断硬件性能瓶颈
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的性能调优。介绍如何诊断硬件的性能问题。（本节部分图存在对齐问题） （要是文章哪里看不懂的，或者图片里面英文看不懂的，可以在文章后面留言，我会回复的。） 阅读全文
posted @ 2014-03-14 06:47 高翔DC 阅读(1768) 评论(2) 推荐(0)
[大牛翻译系列]Hadoop（11）MapReduce 性能调优：诊断一般性能瓶颈
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的性能调优。介绍如何诊断对map和reduce任务都有影响的性能问题。 阅读全文
posted @ 2014-03-13 06:34 高翔DC 阅读(2031) 评论(0) 推荐(0)
[大牛翻译系列]Hadoop（10）MapReduce 性能调优：诊断reduce性能瓶颈
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的性能调优。介绍如何诊断reduce的性能瓶颈。（修改重发布版本） 阅读全文
posted @ 2014-03-12 10:00 高翔DC 阅读(2009) 评论(0) 推荐(2)
[大牛翻译系列]Hadoop（9）MapReduce 性能调优：理解性能瓶颈，诊断map性能瓶颈
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的性能调优。介绍MapReduce性能的影响因子，如何诊断Map的性能瓶颈。 阅读全文
posted @ 2014-03-11 06:19 高翔DC 阅读(6199) 评论(4) 推荐(0)
[大牛翻译系列]Hadoop（8）MapReduce 性能调优：性能测量（Measuring）
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的性能调优。讲解如何获取性能指标，如何监控性能。 阅读全文
posted @ 2014-03-10 06:40 高翔DC 阅读(2386) 评论(2) 推荐(3)
[大牛翻译系列]Hadoop（7）MapReduce：抽样（Sampling）
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的抽样操作。讲解如何从超大数据集中抽取一部分数据来加快开发。 阅读全文
posted @ 2014-03-09 08:09 高翔DC 阅读(3716) 评论(0) 推荐(2)
[大牛翻译系列]Hadoop（6）MapReduce 排序：总排序（Total order sorting）
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的排序操作。讲解如何实现跨map和reduce的所有数据总排序。 阅读全文
posted @ 2014-03-08 06:27 高翔DC 阅读(3706) 评论(0) 推荐(0)
[大牛翻译系列]Hadoop（5）MapReduce 排序：次排序（Secondary sort）
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的排序操作。讲解如何实现次排序。 阅读全文
posted @ 2014-03-07 06:18 高翔DC 阅读(7740) 评论(0) 推荐(3)
[大牛翻译系列]Hadoop（4）MapReduce 连接：选择最佳连接策略
摘要：摘要: 来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的连接操作。讲解如何选择连接策略。 阅读全文
posted @ 2014-03-06 06:47 高翔DC 阅读(1562) 评论(0) 推荐(0)
[大牛翻译系列]Hadoop（3）MapReduce 连接：半连接（Semi-join）
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的连接操作。讲解如何连接超大数据集。 阅读全文
posted @ 2014-03-05 06:13 高翔DC 阅读(4312) 评论(3) 推荐(4)
[大牛翻译系列]Hadoop（2）MapReduce 连接：复制连接（Replication join）
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的连接操作。讲解如何减小map阶段连接内存开销。 阅读全文
posted @ 2014-03-04 07:22 高翔DC 阅读(2550) 评论(4) 推荐(2)
[大牛翻译系列]Hadoop（1）MapReduce 连接：重分区连接（Repartition join）
摘要：来自于某本大牛英文专著。翻译稿。 讲解在Hadoop中的连接操作。讲解如何减小reduce阶段内存开销。 阅读全文
posted @ 2014-03-03 15:55 高翔DC 阅读(5064) 评论(1) 推荐(4)