2015年12月22日

Hadoop编码解码【压缩解压缩】机制详解(1)

摘要: 想想一下,当你需要处理500TB的数据的时候,你最先要做的是存储下来。你是选择源文件存储呢?还是处理压缩再存储?很显然,压缩编码处理是必须的。一段刚刚捕获的60分钟原始视屏可能达到2G,经过压缩处理可以减至500MB左右,一张单反照片可能有5MB,经过压缩之后只有400KB,而质量不会发生明显的损失... 阅读全文

posted @ 2015-12-22 21:13 MrCharles在cnblogs 阅读(4579) 评论(0) 推荐(0)

Hadoop编码解码【压缩解压缩】机制详解(1)

摘要: 想想一下,当你需要处理500TB的数据的时候,你最先要做的是存储下来。你是选择源文件存储呢?还是处理压缩再存储?很显然,压缩编码处理是必须的。一段刚刚捕获的60分钟原始视屏可能达到2G,经过压缩处理可以减至500... 阅读全文

posted @ 2015-12-22 21:13 MrCharles在cnblogs 阅读(213) 评论(0) 推荐(0)

Hadoop IO 特性详解(2)

摘要: (本文引用了microheart,ggjucheng的一些资料,在此感谢。charles觉得知识无价,开源共享无价)这一次我们接着分析文件IO校验的相关代码,看看最底层是如何实现这种大数据集的文件校验的,不得不说设计这个系统的程序员是世界上最具有智慧的一群人,面对复杂难解的问题总是可以找到很好的解决... 阅读全文

posted @ 2015-12-22 10:49 MrCharles在cnblogs 阅读(569) 评论(0) 推荐(0)

Hadoop IO 特性详解(2)【文件校验】

摘要: (本文引用了microheart,ggjucheng的一些资料,在此感谢。charles觉得知识无价,开源共享无价)这一次我们接着分析文件IO校验的相关代码,看看最底层是如何实现这种大数据集的文件校验的,不得不说... 阅读全文

posted @ 2015-12-22 10:49 MrCharles在cnblogs 阅读(303) 评论(0) 推荐(0)

spring mvc default-servlet mvc:resources mvc:default-servlet-handler区别

摘要: mvc:default-servlet-handler其实就是default-servlet 交由web容器自己处理mvc:resources spring来处理没有被映射的url web容器来处理下面为转载:h... 阅读全文

posted @ 2015-12-22 09:24 MrCharles在cnblogs 阅读(122) 评论(0) 推荐(0)

spring mvc default-servlet mvc:resources mvc:default-servlet-handler区别

摘要: mvc:default-servlet-handler其实就是default-servlet 交由web容器自己处理mvc:resources spring来处理没有被映射的url web容器来处理下面为转载:http://perfy315.iteye.com/blog/2008763优雅REST风... 阅读全文

posted @ 2015-12-22 09:23 MrCharles在cnblogs 阅读(548) 评论(0) 推荐(0)

导航