随笔分类 - hadoop

关系型数据库和非关系型数据库介绍及优劣势比较

摘要：关系型数据库和非关系型数据库介绍及优劣势比较版权声明：本文为yunshuxueyuan原创文章。如需转载请标明出处： http://www.cnblogs.com/sxt-zkys/QQ技术交流群：299142667 关系型数据库关系模型指的就是二维表格模型，而一个关系型数据库就是由二维表及其之阅读全文

posted @ 2017-09-19 15:45 北京尚学堂旗下-云数学院阅读(2035) 评论(0) 推荐(0)

集群时间同步

摘要：版权声明：本文为yunshuxueyuan原创文章。如需转载请标明出处： http://www.cnblogs.com/sxt-zkys/QQ技术交流群：299142667 时间同步简介 1、为什么需要时间同步随着集群节点数的增加，集群各节点之间时间不一致的问题会越来越严重，经常会引发故障，为避免阅读全文

posted @ 2017-09-18 15:40 北京尚学堂旗下-云数学院阅读(239) 评论(0) 推荐(0)

自定义UDF函数应用异常

摘要：自定义UDF函数应用异常版权声明：本文为yunshuxueyuan原创文章。如需转载请标明出处： http://www.cnblogs.com/sxt-zkys/QQ技术交流群：299142667 定义函数PlatformConvert：实现传入hive表中string类型字段，通过查询中间表，阅读全文

posted @ 2017-08-31 16:34 北京尚学堂旗下-云数学院阅读(3811) 评论(0) 推荐(0)

Hadoop异常总结

摘要：版权声明：本文为yunshuxueyuan原创文章。如需转载请标明出处：http://www.cnblogs.com/sxt-zkys/QQ技术交流群：299142667 Hadoop异常总结 hadoop启动不正常，hadoop datanode节点超时时间设置，HDFS冗余数据块的自动删除，na 阅读全文

posted @ 2017-08-28 17:41 北京尚学堂旗下-云数学院阅读(428) 评论(0) 推荐(0)

使用hadoop mapreduce分析mongodb数据

摘要：使用hadoop mapreduce分析mongodb数据（现在很多互联网爬虫将数据存入mongdb中，所以研究了一下，写此文档）版权声明：本文为yunshuxueyuan原创文章。如需转载请标明出处： http://www.cnblogs.com/sxt-zkys/QQ技术交流群：299142 阅读全文

posted @ 2017-07-27 16:18 北京尚学堂旗下-云数学院阅读(681) 评论(0) 推荐(0)

Hadoop之HDFS及NameNode单点故障解决方案

摘要：Hadoop之HDFS 版权声明：本文为yunshuxueyuan原创文章。如需转载请标明出处： http://www.cnblogs.com/sxt-zkys/QQ技术交流群：299142667 HDFS介绍 HDFS（Hadoop Distributed File System ）Hadoop分阅读全文

posted @ 2017-07-24 16:58 北京尚学堂旗下-云数学院阅读(8618) 评论(0) 推荐(3)

Hadoop 2.6.5 FileSystem和Configuration两个对象的探究

摘要：Hadoop 2.6.5 FileSystem和Configuration两个对象的探究版权声明：本文为yunshuxueyuan原创文章，如需转载，请标明出处。【http://www.cnblogs.com/sxt-zkys/】QQ技术交流群：299142667 (结论) 通过尚学堂旗下云数学院阅读全文

posted @ 2017-07-18 17:35 北京尚学堂旗下-云数学院阅读(786) 评论(0) 推荐(0)