大数据项目day1

第一章 课程计划

介绍项目背景

项目总体概述

项目功能描述

项目架构

实时计算平台

实时BI可视化

第二章 项目背景

第一节 背景描述

“旅游大数据”是指在旅游的“住行游购娱”六要素领域所产生的数量巨大、快速传

播、类型多样相关

（有结构和非结构的）、富有价值的数据集合，并且可以通过大数据技术（例如云

计算、分布式存储、 流运算、大数据算法、NoSQL数据库、SOA结构体系等）进行

数据相关性分析和数据可视化，从而使游 客消费者的决策更加有效便捷，提高满意

度。

随着大数据技术在各行各业的落地为企业和用户提供了真实有意义的帮助，但

传统的离线计算也随 着人们需要了解数据实时情况的迫切需求而导致问题日益突

出，实时流式大数据分析正在成为人们新的 关注点，旅游行业也不例外，企业也需

了解用户的实时行为、尤其是异常动作，另外实时推荐也是越来 越起到增加用户粘

性、加强用户体验、改进运营方向的重点任务。

在传统大数据架构的基础上，流式架构数据全程以流的形式处理，在数据接入

端将ETL替换为数据 通道。经过流处理加工后的数据，以消息的形式直接推送给了

消费者。存储部分在外围系统以窗口的形 式进行存储。适用于预警、监控、对数据

有有效期要求的情况。