摘要：
storm 原理简介及单机版安装指南本文翻译自：https://github.com/nathanmarz/storm/wiki/Tutorial原文链接自：http://www.open-open.com/lib/view/open1417653922886.html阅读目录1、准备工作2、一个S... 阅读全文
posted @ 2015-04-13 21:12 xymaqingxiang 阅读(228) 评论(0) 推荐(0)
摘要：
如今，从小型初创企业到行业巨头，各种规模的供应商都在使用开源来处理大数据和运行预测分析。本文介绍了一些大数据方面的顶级开源工具，分为四个领域：数据存储，开发平台，开发工具和集成，分析和报告工具。 随着大数据与预测分析的成熟，开源作为底层技术授权解决方案的最大贡献者的优势越来越明显。 如今，从... 阅读全文
posted @ 2015-04-13 20:04 xymaqingxiang 阅读(290) 评论(0) 推荐(0)
摘要：
最简单的JStorm例子分为以下几个步骤：1、生成Topology 1 Map conf = new HashMp(); 2 //topology所有自定义的配置均放入这个Map 3 4 TopologyBuilder builder = new TopologyBuilder(); 5 //创建... 阅读全文
posted @ 2015-04-09 11:24 xymaqingxiang 阅读(2617) 评论(0) 推荐(0)
摘要：
1、开发经验总结——12 Sep 2014·8 revisions在jstorm中， spout中nextTuple和ack/fail运行在不同的线程中， 从而鼓励用户在nextTuple里面执行block的操作， 原生的storm，nextTuple和ack/fail在同一个线程，不允许nextT... 阅读全文
posted @ 2015-04-09 10:21 xymaqingxiang 阅读(4699) 评论(0) 推荐(0)
摘要：
Nimbus HA feature is quite important for our application running on the storm cluster. So, we've been working on the problem for some time and now a... 阅读全文
posted @ 2015-04-08 17:35 xymaqingxiang 阅读(411) 评论(0) 推荐(0)
摘要：
一、Kafka+Storm+HDFS整合实践本文导读：1 前言2 Kafka安装配置3 Storm安装配置4 整合Kafka+Storm5 整合Storm+HDFS6 整合Kafka+Storm+HDFS7 参考链接参考链接：大数据架构：flume-ng+Kafka+Storm+HDFS 实时系统组... 阅读全文
posted @ 2015-04-08 16:05 xymaqingxiang 阅读(327) 评论(0) 推荐(0)
摘要：
本文导读：——JStorm之Nimbus简介1、简介2、系统框架与原理3、实现逻辑和代码剖析 1）Nimbus启动 2）Topology提交 3）任务调度 4）任务监控4、结束语5、参考文献附：JStorm之NimbusServer启动流程一、简介 JStorm集群包含两类... 阅读全文
posted @ 2015-04-07 12:21 xymaqingxiang 阅读(1433) 评论(0) 推荐(0)
摘要：
准备：字符串比大小：比的就是字符串里每个字符的ASCII码的大小。（其实这样的比较没有多大的意义，我们关心的是字符串是否相等，即匹配等）字符串的存储结构：同线性表（顺序存储+链式存储） 顺序存储结构是一组地址连续的存储单元来存储字符串中的字符序列；按照预定义的大小，为每个定义的字符串变量分配一个固... 阅读全文
posted @ 2015-04-06 22:17 xymaqingxiang 阅读(438) 评论(0) 推荐(0)
摘要：
本文导读：1 Kafka简介2 Kafka设计 + 设计要点3 Kafka应用场景4 参考资料（推荐）分布式消息系统：KafkaKafka是分布式发布-订阅消息系统。它最初由LinkedIn公司开发，之后成为Apache项目的一部分。Kafka是一个分布式的，可划分的，冗余备份的持久性的日志服务。它... 阅读全文
posted @ 2015-04-03 11:40 xymaqingxiang 阅读(577) 评论(0) 推荐(0)
摘要：
分布式服务框架：Zookeeper(分布式系统的可靠协调系统) 本文导读：1 Zookeeper概述2 Zookeeper总体结构 ——逻辑图、运转流程、特点、优点、数据结构3 Zookeeper应用场景Zookeeper概述： Zookeeper是一个高性能，分布式的，开源分布式应用协调服务。... 阅读全文
posted @ 2015-04-03 11:38 xymaqingxiang 阅读(669) 评论(0) 推荐(0)
浙公网安备 33010602011771号