blcblc - 博客园

2017年6月28日

今天用mongodb和pymongo的一些积累

该文被密码保护。阅读全文

posted @ 2017-06-28 19:31 blcblc 阅读(4) 评论(0) 推荐(0)

展现CF结果的页面，用tomcat搭建，用到了JSP和JSTL等技术

该文被密码保护。阅读全文

posted @ 2017-06-28 14:51 blcblc 阅读(7) 评论(0) 推荐(0)

优化一下spark的CF程序 & 协同过滤最终的版本

该文被密码保护。阅读全文

posted @ 2017-06-28 10:17 blcblc 阅读(3) 评论(0) 推荐(0)

2017年6月27日

解决spark数据倾斜的问题

该文被密码保护。阅读全文

posted @ 2017-06-27 23:20 blcblc 阅读(1) 评论(0) 推荐(0)

spark性能调优

该文被密码保护。阅读全文

posted @ 2017-06-27 16:48 blcblc 阅读(1) 评论(0) 推荐(0)

hadoop hdfs查看空间限额的方法 count

该文被密码保护。阅读全文

posted @ 2017-06-27 10:49 blcblc 阅读(6) 评论(0) 推荐(0)

2017年6月26日

准备用nodejs+express+mongodb搭一套在线系统，然后换成java+tomcat & Linux上Tomcat的安装

该文被密码保护。阅读全文

posted @ 2017-06-26 22:31 blcblc 阅读(6) 评论(0) 推荐(0)

spark实现协同过滤 & DataFrame学习 & 嵌套json的读取

该文被密码保护。阅读全文

posted @ 2017-06-26 13:57 blcblc 阅读(2) 评论(0) 推荐(0)

2017年6月25日

Zookeeper vs. etcd

摘要： etcd是go语言实现的。对比，可以参考这篇文章： http://studygolang.com/articles/4837 《服务发现：Zookeeper vs etcd vs Consul》 etcd是一个数据库,它的目标是构建一个高可用的分布式键值数据库,它是基于GO语言实现.在分布式系统中阅读全文

posted @ 2017-06-25 01:08 blcblc 阅读(353) 评论(0) 推荐(0)

spark系统实现yarn资源的自动调度

摘要：参考： http://blog.csdn.net/dandykang/article/details/48160953 对于Spark应用来说，资源是影响Spark应用执行效率的一个重要因素。当一个长期运行的服务（比如Thrift Server），若分配给它多个Executor，可是却没有任何任务阅读全文

posted @ 2017-06-25 00:33 blcblc 阅读(3841) 评论(0) 推荐(0)