文章分类 - 大数据相关
大数据相关
摘要:携程实时智能检测平台建设实践 巴蜀真人 2019-12-27 17:25:40 浏览3655 深度学习 大数据 算法 监控 消息队列 数据处理 配置 AI 流计算 flink 实时计算 摘要:本次演讲将为大家介绍携程实时智能异常检测平台——Prophet。到目前为止,Prophet基本覆盖了携程所有
阅读全文
摘要:美团点评基于 Flink 的实时数仓平台实践 巴蜀真人 2020-01-02 22:02:54 浏览790 大数据 日志 数据处理 平台架构 OLAP UDF 存储 流计算 flink 实时计算 作者:鲁昊@美团点评 一、美团点评实时计算演进 美团点评实时计算演进历程 在 2016 年,美团点评就已
阅读全文
摘要:Flink 1.9 实战:使用 SQL 读取 Kafka 并写入 MySQL 巴蜀真人 2019-09-03 14:25:17 浏览4271 阿里云实时计算专项 上周六在深圳分享了《Flink SQL 1.9.0 技术内幕和最佳实践》,会后许多小伙伴对最后演示环节的 Demo 代码非常感兴趣,迫不及
阅读全文
摘要:带你读《Flink原理、实战与性能优化》之三:Flink编程模型 温柔的养猫人 2019-11-01 476浏览量 简介: 这是一部以实战为导向,能指导读者零基础掌握Flink并快速完成进阶的著作,从功能、原理、实战和调优等4个维度循序渐进地讲解了如何利用Flink进行分布式流式应用开发。作者是该领
阅读全文
摘要:带你读《Flink原理、实战与性能优化》之二:环境准备 温柔的养猫人 2019-11-01 423浏览量 简介: 这是一部以实战为导向,能指导读者零基础掌握Flink并快速完成进阶的著作,从功能、原理、实战和调优等4个维度循序渐进地讲解了如何利用Flink进行分布式流式应用开发。作者是该领域的资深专
阅读全文
摘要:带你读《Flink原理、实战与性能优化》之一:Apache Flink介绍 温柔的养猫人 2019-11-01 15:44:52 浏览1270 华章出版社 大数据技术丛书点击查看第二章点击查看第三章Flink原理、实战与性能优化 张利兵 著 第1章 Apache Flink介绍本章对Apache F
阅读全文
摘要:近期,阿里将Blink开源的事儿在大数据圈引起了不小的骚动。本次开源的 Blink 代码在 Flink1.5.1 版本之上,加入了大量的新功能,以及在性能和稳定性上的各种优化。主要贡献包括:阿里巴巴在流计算上积累的一些新功能和性能的优化,一套完整的(能够跑通全部 TPC-H/TPC-DS,能够读取
阅读全文
摘要:一.Flink 在快手应用场景与规模 1. Flink 在快手应用场景 快手计算链路是从 DB/Binlog 以及 WebService Log 实时入到 Kafka 中,然后接入 Flink 做实时计算,其中包括实时 ETL、实时分析、Interval Join 以及实时训练,最后的结果存到 Dr
阅读全文
摘要:1、Apache Flink 在滴滴的背景 2、Apache Flink 在滴滴的平台化 3、Apache Flink 在滴滴的生产实践 4、Stream SQL 5、展望规划 Apache Flink 在滴滴 在滴滴,所有的数据基本上可以分为四个大块: 1、轨迹数据:轨迹数据和订单数据往往是业务方
阅读全文
摘要:Kafka从0.8版本开始提供High Availability机制,从而提高了系统可用性及数据持久性。本文从Data Replication和Leader Election两方面介绍了Kafka的HA机制。 原创文章,转载请务必将下面这段话置于文章开头处。(已授权InfoQ中文站发布)本文转发自技
阅读全文
摘要:原创文章,转载请务必将下面这段话置于文章开头处。(已授权InfoQ中文站发布)本文转发自技术世界,原文链接 http://www.jasongj.com/2015/03/10/KafkaColumn1 摘要 Kafka是由LinkedIn开发并开源的分布式消息系统,因其分布式及高吞吐率而被广泛使用,
阅读全文