摘要: 1.读lzo文件需要添加以下代码,并导入lzo相关的jar包job.setInputFormatClass(LzoTextInputFormat.class);2.写lzo文件lzo格式默认是不支持splitable的,需要为其添加索引文件,才能支持多个map并行对lzo文件进行处理如果希望redu... 阅读全文
posted @ 2015-11-27 11:19 宝山方圆 阅读(790) 评论(0) 推荐(0)
摘要: linux里的文件被删除后,空间没有被释放是因为在Linux系统中,通过rm或者文件管理器删除文件将会从文件系统的目录结构上解除链接(unlink).然而如果文件是被打开的(有一个进程正在使用),那么进程将仍然可以读取该文件,磁盘空间也一直被占用。解决方法:1、先df -lh查看一下磁盘使用状况2、... 阅读全文
posted @ 2015-11-09 05:47 宝山方圆 阅读(241) 评论(0) 推荐(0)
摘要: NIS & Kerberos配置 所需RPM包列表: krb5-server-1.10.3-42.el6.x86_64.rpm krb5-workstation-1.10.3-42.el6.x86_64.rpm krb5-devel-1.10.3-42.el6.x86_64.rpm ypserv-2 阅读全文
posted @ 2015-09-24 09:14 宝山方圆 阅读(1139) 评论(0) 推荐(0)
摘要: 1 八月 2010 22:07:51关于Kerberos的对话(MIT)雅典娜与宙斯雅典娜与宙斯关于地狱之门守护者的对话Kerberos: Network Authentication ProtocolKerberos这一名词来源于希腊神话“三个头的狗——地狱之门守护者” Kerberos 是一... 阅读全文
posted @ 2015-09-15 09:18 宝山方圆 阅读(825) 评论(0) 推荐(0)
摘要: 带包的java类在cmd环境下的执行办法 阅读全文
posted @ 2015-02-26 22:16 宝山方圆 阅读(264) 评论(0) 推荐(0)
摘要: 当Hadoop集群的某单个节点出现问题时,一般不必重启整个系统,只须重启这个节点,它会自动连入整个集群。在坏死的节点上输入如下命令即可:hadoop-daemon.sh start datanodehadoop-daemon.sh start secondarynamenode案例如下:hadoop... 阅读全文
posted @ 2014-09-11 14:16 宝山方圆 阅读(4256) 评论(0) 推荐(1)
摘要: 【转自】:http://blog.chinaunix.net/uid-23622436-id-3311579.htmlcat /proc/cpuinfo中的信息processor 逻辑处理器的id。physical id 物理封装的处理器的id。core id 每个核心的id。cpu cores 位... 阅读全文
posted @ 2014-09-05 11:07 宝山方圆 阅读(459) 评论(0) 推荐(0)
摘要: PowerDesigner 阅读全文
posted @ 2014-08-30 17:10 宝山方圆 阅读(1434) 评论(0) 推荐(0)
摘要: 一定要确保机器名没有下划线和.等特殊字符搞了好久,终于找到了是上面这个原因。搭建好了,下一步就是调优喽! 阅读全文
posted @ 2014-08-06 11:48 宝山方圆 阅读(470) 评论(0) 推荐(0)
摘要: 超详细解说Hadoop伪分布式搭建原文http://www.tuicool.com/articles/NBvMv2原原文 http://wojiaobaoshanyinong.iteye.com/blog/1946817单节点伪分布式Hadoop配置(声明:文档里面需要用户输入的均已斜体表示)第一步... 阅读全文
posted @ 2014-07-31 10:49 宝山方圆 阅读(485) 评论(0) 推荐(0)