摘要：
一、SessionPage是什么？ SessionPage对象和WebPage对象的 s 模式，可用收发数据包的形式访问网页。 顾名思义，SessionPage是一个使用使用Session（requests 库）对象的页面，它使用 POM 模式封装了网络连接和 html 解析功能，使收发数据包也可以 阅读全文
posted @ 2019-10-29 14:56
酒剑仙*
阅读(788)
评论(0)
推荐(0)
摘要：
一、需求分析 1.1. 背景介绍 在线社交平台每天都会有大量的用户在线，会出现大量的聊天数据，通过对聊天数据的统计分析，可以更好的对用户构建精准的用户画像，为用户提供更好的服务以及实现高 ROI 的平台运营推广，给公司的发展决策提供精确的数据支撑。后续将基于一个社交平台 App 的用户数据，完成相关 阅读全文
posted @ 2019-10-29 12:30
酒剑仙*
阅读(1319)
评论(0)
推荐(0)
摘要：
一、Hive函数 1.1.函数分类 Hive的函数分为两大类：内置函数、用户定义函数UDF Hive 的函数共计有上百种，下面会挑选一些常用的进行讲解。 详细的函数使用可以参阅官方文档 (https://cwiki.apache.org/confluence/display/Hive/Languag 阅读全文
posted @ 2019-10-29 12:09
酒剑仙*
阅读(1110)
评论(0)
推荐(0)
摘要：
一、基本查询 1.1.基本语法 查询语句的基本语法： SELECT [ALL | DISTINCT]select_expr, select_expr, ... FROM table_reference [WHERE where_condition] [GROUP BYcol_list] [HAVIN 阅读全文
posted @ 2019-10-29 11:48
酒剑仙*
阅读(4934)
评论(0)
推荐(0)
摘要：
一、数据库操作 1.1.数据库操作语法 基于语法描述说明 CREATE DATABASE [IF NOT EXISTS] db_name [LOCATION] 'path'; SELECT expr, ... FROM tbl ORDER BY col_name [ASC | DESC] (A | 阅读全文
posted @ 2019-10-29 11:40
酒剑仙*
阅读(1383)
评论(0)
推荐(0)
摘要：
一、数据仓库概述 1.1.什么是数据仓库（数仓） 数据仓库，英文名称为Data Warehouse，可简写为DW或DWH。数据仓库的目的是构建面向分析的集成化数据环境，为企业提供决策支持（Decision Support）。它出于分析性报告和决策支持目的而创建。 MySQL数据库 => 面向事务的集 阅读全文
posted @ 2019-10-29 11:16
酒剑仙*
阅读(1444)
评论(0)
推荐(0)
摘要：
一、分布式计算概述 1.1.什么是计算 计算是对数据进行处理，使用统计分析等手段得到需要的结果，大数据体系内的计算， 举例： 销售额统计、区域销售占比、季度销售占比 利润率走势、客单价走势、成本走势 品类分析、消费者分析、店铺分析 等等一系列，基于数据得出的结论。 这些就是我们所说的计算。 1.2. 阅读全文
posted @ 2019-10-29 09:43
酒剑仙*
阅读(650)
评论(0)
推荐(0)
浙公网安备 33010602011771号