hive学习
摘要:大数据的仓库Hive学习 10期-崔晓光 2016-06-20 大数据 hadoop 10原文链接 大数据的仓库Hive学习 10期-崔晓光 2016-06-20 大数据 hadoop 10原文链接 我们接着之前学习的大数据来学习。之前说到了NoSql的HBase数据库以及Hadoop中的HDFS存
阅读全文
添加用户到sudo组
摘要:sudo usermod -a -G sudo username
阅读全文
HTTP协议用的TCP但是只建立单向连接
摘要:作者:IronTech链接:https://www.zhihu.com/question/20085992/answer/71742030来源:知乎著作权归作者所有,转载请联系作者获得授权。 下面的解释copy自quora,回答得很精彩HTTP uses TCP connection. But HT
阅读全文
Hadoop基本操作
摘要:命令基本格式: hadoop fs -cmd < args > 1.ls hadoop fs -ls / 列出hdfs文件系统根目录下的目录和文件 hadoop fs -ls -R / 列出hdfs文件系统所有的目录和文件 2.put hadoop fs -put < local file > <
阅读全文
Hadoop原理介绍
摘要:Hadoop核心之HDFS 架构设计 老嗨 2015-09-18 16:55:00 浏览225 评论0 摘要: 概述:HDFS即Hadoop Distributed File System分布式文件系统,它的设计目标是把超大数据集存储到分布在网络中的多台普通商用计算机上,并且能够提供高可靠性和高吞吐
阅读全文
sed用法
摘要:简介 sed 是一种在线编辑器,它一次处理一行内容。处理时,把当前处理的行存储在临时缓冲区中,称为“模式空间”(pattern space),接着用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕。接着处理下一行,这样不断重复,直到文件末尾。文件内容并没有 改变,除非你使用重定向存储
阅读全文
设置Ubuntu为本地时间
摘要:大家在切换操作系统的时候会发现一个问题, Windows 和 Ubuntu 的时间会出现不一致的情况。在 Windows 中把时间设置正确了过后,回到在 Ubuntu 后系统的时间又不一样了,在 Ubuntu 中把时间设置正确后进入 Windows 后,时间又不一致了。出现这种情况的原因是 Wind
阅读全文
Hadoop入门系列一
摘要:作者:Aitian Ma链接:https://www.zhihu.com/question/24965053/answer/102858134来源:知乎著作权归作者所有,转载请联系作者获得授权。 Hadoop的HDFS和Hadoop的面试问题1)列出Hadoop集群的Hadoop守护进程和相关的角色
阅读全文
java 读取文件最佳实践
摘要:Java应用中很常见的一个问题,如何读取jar/war包内和所在路径的配置文件,不同的人根据不同的实践总结出了不同的方案,但其他人应用却会因为环境等的差异发现各种问题,本文则从原理上解释最佳实践。 2.1.log4j log4j读取配置的代码是: PropertyConfigurator.confi
阅读全文