tinylcy

摘要： codec实现了一种压缩-解压缩算法，在Hadoop中，一个对CompressionCodec接口的实现代表一个codecCompressionCodec接口包含两个函数如果要对写入输出数据流的数据进行压缩，可用createOutputStream(OutputStream out)方法在底层的数据... 阅读全文

摘要： wordcount作为Hadoop的示例程序，其思想很简洁，但也值得去理解尤其是作为Hadoop菜鸟的我wordcount程序如下：package com.lcy.hadoop.examples;import java.io.IOException;import java.util.StringTo... 阅读全文

摘要： FileSystem的listStatus方法的功能：列出目录中的内容当传入的参数是一个文件时，它会转变成以数组的方式返回长度为1的FileStatus对象当传入的参数是一个目录时，返回0或多个FileStatus对象，表示此目录中包含的文件和目录如果指定一组路径，其执行结果相当于依次轮流传递每条路... 阅读全文

摘要： chown，即为change owner如下图：hadoop-1.2.1.tar.gz原来的拥有者为hadoop用户，现将其拥有者修改为root:========================================================================chmod... 阅读全文

摘要： 参照前面提到的通过Hadoop URL读取数据，有时根本不可能在应用中设置URLStreamHandlerFactory实例，在这种情况下，需要使用FileSystem API来打开一个文件的输入流FIleSystem是一个通用文件系统的API，所以第一步是检索我们需要的文件系统的实例，这里是HDF... 阅读全文

摘要： 让Java程序能够识别Hadoop的hdfs URL方案需要一些额外的工作，采用的方法是通过FsUrlStreamHandlerFactory实例调用java.net.URL对象的setURLStreamHandlerFactory方法。每个Java虚拟机只能调用一次这个方法，因此通常在静态方法中调... 阅读全文

摘要： Tomcat日志：127.0.0.1,-,-,[08/May/2014:13:42:40 +0800],GET / HTTP/1.1,200,11444127.0.0.1,-,-,[08/May/2014:13:42:42 +0800],GET /jygl/jaxrs/teachingManage/... 阅读全文

摘要： 从官网下载Eclipse IDE for Java EE Developers的Linux版本eclipse-jee-luna-SR2-linux-gtk.tar.gz我把下载后的压缩包移动到了 /usr/local 下解压：$ tar -zxvfeclipse-jee-luna-SR2-linux... 阅读全文

摘要： 1.which命令当输入一个Linux命令时，Shell究竟执行的是哪一个目录下的同名命令，我们不得而知，可以使用which予以验证。2.whereis命令与which类似的命令，whereis用于检索与给定命令相关的文件。3.apropos命令借助于apropos命令，利用关键字检索命令。apro... 阅读全文

摘要： 文件列表命令：如果你想看到所有的字目录，则可以使用Hadoop的lsr命令：在本地的文件系统创建一个名为example.txt的文本文件，用Hadoop的命令put将它从本地文件系统复制到HDFS上去：注意命令最后一个参数是一个句点（.）。这意味着我把文件放入了默认的工作目录，等价于 bin/had... 阅读全文