06 2017 档案

摘要：hadoop参数配置，主要是配置 core-site.xml,hdfs-site.xml,mapred-site.xml 三个配置文件，core-site.xml是全局配置,hdfs-site.xml和mapred-site.xml分别是hdfs和mapred的局部配置，core-default.x 阅读全文

摘要：client 向 Active NN 发送写请求时，NN为这些数据分配DN地址，HDFS文件块副本的放置对于系统整体的可靠性和性能有关键性影响。一个简单但非优化的副本放置策略是，把副本分别放在不同机架，甚至不同IDC，这样可以防止整个机架、甚至整个IDC崩溃带来的错误，但是这样文件写必须在多个机架之 阅读全文

摘要：hadoop1.x 版本，NN是HDFS集群的单点故障点，每一个集群只有一个NN，如果这个机器或进程不可用，整个集群就无法使用。为了解决这个问题，出现了一堆针对HDFS HA的解决方案(如：Linux HA, VMware FT, shared NAS+NFS, BookKeeper, QJM/Qu 阅读全文

摘要：深度剖析hdfs原理 阅读全文

摘要：Hive是基于Hadoop平台的，它提供了类似SQL一样的查询语言HQL。有了Hive，如果使用过SQL语言，并且不理解Hadoop MapReduce运行原理，也就无法通过编程来实现MR，但是你仍然可以很容易地编写出特定查询分析的HQL语句，通过使用类似SQL的语法，将HQL查询语句提交Hive系 阅读全文

摘要：需要预先新建编辑好一个excel文件，设置好样式。 编辑好输出的数据，根据excel坐标一一对应。 支持列表数据输出，列表中列合并。 代码如下： 大体思路： 最主要是制作好模版 代码根据模版，读取设置好的列的格式，在循环数据行，读取模版中的对应的行，存在该行就取得，不存在看是否需要copy某一行，不 阅读全文

摘要：摘要: 在做Spring注解时，查找了一些 @Resource和@Autowired的资料，对这两者做了总结和对比 @Resource和@Autowired两者都是做bean的注入使用。 其实@Resource并不是Spring的注解，包是javax.annotation.Resource 需要导入 阅读全文