摘要：
双11大屏 每年天猫双十一购物节，都会有一块巨大的实时作战大屏，展现当前的销售情况。 这种炫酷的页面背后，其实有着非常强大的技术支撑，而这种场景其实就是实时报表分析。 实时报表分析是近年来很多公司采用的报表统计方案之一，其中最主要的应用就是实时大屏展示。利用流式计算实时得出结果直接被推送到前端应用， 阅读全文
摘要：
新功能 允许消费者从最近的副本进行获取 为 Consumer Rebalance Protocol 增加对增量协同重新均衡（incremental cooperative rebalancing）的支持 新增 MirrorMaker 2.0 (MM2)，新的多集群跨数据中心复制引擎 引入新的 Jav 阅读全文
摘要：
Vmvare设置好虚拟机的磁盘大小之后，发现磁盘空间不够了，这个时候怎么扩展磁盘的大小呢？ 首先，在确保虚拟机关闭的情况下，右键设置，选择硬盘，扩展，这样就可以增加磁盘的大小。 但是由于未进行分区和磁盘挂载的设置，我们启动虚拟机以后并不能使用增加的磁盘空间，这个时候怎么办呢？有两种办法 先用root 阅读全文
摘要：
Ambari 2.7.3.0安装新组件和之前版本略有不同，本文将简述安装新组件的简单过程。 前提是大家已经安装好Ambari 2.7.3.0 这时候由于有一些组件没有添加，就需要安装新的组件。 首先我们登录到Ambari中。 然后选择左下角 Stack and Versions 在这个页面可以看到我 阅读全文
摘要：
flink是一款开源的大数据流式处理框架，他可以同时批处理和流处理，具有容错性、高吞吐、低延迟等优势，本文简述flink的编程模型。 数据集类型： 无穷数据集：无穷的持续集成的数据集合 有界数据集：有限不会改变的数据集合 常见的无穷数据集有： 用户与客户端的实时交互数据 应用实时产生的日志 金融市场 阅读全文
摘要：
flink是一款开源的大数据流式处理框架，他可以同时批处理和流处理，具有容错性、高吞吐、低延迟等优势，本文简述flink在windows和linux中安装步骤，和示例程序的运行，包括本地调试环境，集群环境。另外介绍Flink的开发工程的构建。 首先要想运行Flink，我们需要下载并解压Flink的二 阅读全文
摘要：
1、基本组件栈 了解Spark的朋友会发现Flink的架构和Spark是非常类似的，在整个软件架构体系中，同样遵循着分层的架构设计理念，在降低系统耦合度的同时，也为上层用户构建Flink应用提供了丰富且友好的接口。 Flink分为架构分为三层，由上往下依次是API&Libraries层、Runtim 阅读全文
摘要：
漏洞描述 Apache Flink是一个用于分布式流和批处理数据的开放源码平台。Flink的核心是一个流数据流引擎，它为数据流上的分布式计算提供数据分发、通信和容错功能。Flink在流引擎之上构建批处理，覆盖本地迭代支持、托管内存和程序优化。近日有安全研究人员发现apache flink允许上传任意 阅读全文
摘要：
一、Atlas是什么？ 在当今大数据的应用越来越广泛的情况下，数据治理一直是企业面临的巨大问题。 大部分公司只是单纯的对数据进行了处理，而数据的血缘，分类等等却很难实现，市场上也急需要一个专注于数据治理的技术框架，这时Atlas应运而生。 Atlas官网地址：https://atlas.apache 阅读全文
摘要：
Apache Flink是什么？ 在当代数据量激增的时代，各种业务场景都有大量的业务数据产生，对于这些不断产生的数据应该如何进行有效的处理，成为当下大多数公司所面临的问题。随着雅虎对hadoop的开源，越来越多的大数据处理技术开始涌入人们的视线，例如目前比较流行的大数据处理引擎Apache Sp 阅读全文