05 2017 档案

zookeeper基础知识
摘要:Zookeeper 不仅能够帮你维护当前的集群中机器的服务状态,而且能够帮你选出一个“总管”,让这个总管来管理集群,这就是 Zookeeper 的另一个功能 Leader Election。配置管理(Configuration Management)配置的管理在分布式应用环境中很常见,例如同一个应用 阅读全文

posted @ 2017-05-20 21:15 tneduts 阅读(230) 评论(0) 推荐(0)

spark streaming基础知识1
摘要:1.怎么理解spark streaming中的dstream? 它是spark streaming的基础数据结构,代表着(time,RDD)序列,有两种生成方式,一种是基于流数据创建(kafka,socket...),一种是基于已有的dstream进行转换产生.在spark streaming作业运 阅读全文

posted @ 2017-05-20 12:30 tneduts 阅读(332) 评论(2) 推荐(0)

scala和正则表达式常用基础知识示例
摘要:http://www.cnblogs.com/deerchao/archive/2006/08/24/zhengzhe30fengzhongjiaocheng.html. 匹配除换行符以外的任意字符\w 匹配字母或数字或下划线或汉字\s 匹配任意的空白符\d 匹配数字\b 匹配单词的开始或结束^ 匹 阅读全文

posted @ 2017-05-20 07:31 tneduts 阅读(698) 评论(0) 推荐(0)

有关RDD的基础学习1
摘要:1.spark rdd为什么不能嵌套? 譬如 val rdd1=sc.parallel(range(1,100)) val rdd2=sc.parallel(range(1,100)) rdd1.map(x=>rdd.count()) 因为rdd的构造器中rdd(@trancient sc:Spar 阅读全文

posted @ 2017-05-18 21:50 tneduts 阅读(409) 评论(0) 推荐(0)

JAVA中hashmap的分析
摘要:从http://blog.csdn.net/luanlouis/article/details/41576373?utm_source=tuicool&utm_medium=referral 学习到了java中hashmap的内部原理,非常不错的文章,非常感谢作者的奉献.以下为主要内容摘录. jav 阅读全文

posted @ 2017-05-17 08:07 tneduts 阅读(278) 评论(0) 推荐(0)

关于ldap的学习
摘要:主要从以下网站学习了相关基础知识概念,安装与基本配置. http://www.aikaiyuan.com/8269.htmlhttps://segmentfault.com/a/1190000002607140http://www.xuexikuai.com/html/201612/247991.h 阅读全文

posted @ 2017-05-13 09:52 tneduts 阅读(304) 评论(0) 推荐(0)

hdp (ambari) 集成hue
摘要:ambari-server resetambari-admin-password-reset https://github.com/EsharEditor/ambari-hue-service可以基于HDP来访问HUE,暂时没有做尝试 我尝试了,使用hdp自带的hue rpm包来安装,直接yum i 阅读全文

posted @ 2017-05-03 16:48 tneduts 阅读(4340) 评论(1) 推荐(0)

导航