摘要: 微软体系中的SSIS, SSAS, SSRS是一套相辅相成的工具,组成了微软的BI(商业智能)解决方案。 架构举例,SQL SERVER 2012 BI体系配置如下: 简单来说: SSIS 是ETL工具,将 数据库的数据抽取到数据仓库; SSAS 是Cube(多维数据库)工具,将数据仓库转换成多维数 阅读全文
posted @ 2021-04-05 11:41 划水De雁小明 阅读(764) 评论(0) 推荐(0) 编辑
摘要: 用多维数据库中的点,表示对业务的度量结果。在各种各样的市场销售产品,并不断对企业各类业务的表现进行度量。 术语汇总结合图 相关概念 事实(表示某个业务度量)表:用于度量 存储组织机构业务过程事件的性能度量结果;每一行数据是一个特定级别的细节数据 ;事实表的主键,是外键集合(组合键) 。 维度表:用于 阅读全文
posted @ 2021-03-13 21:11 划水De雁小明 阅读(656) 评论(0) 推荐(0) 编辑
摘要: Hadoop技术生态的组成部分: Hadoop Common:支持Hadoop其他模块的通用工具 HDFS:分布式文件系统,提供了高吞吐量的数据访问(最初始模块之一) YARN:作业调度和资源管理的框架 MapReduce:基于YARN的大数据分布式计算框架(最初始模块之一) HDFS 利用多个商业 阅读全文
posted @ 2021-03-07 15:56 划水De雁小明 阅读(182) 评论(0) 推荐(0) 编辑
摘要: 一份数据报表的诞生,大概率是从某个现象或者某几个现象被大家发现开始的:如果关心股票市场的盆友们可能已经注意到,最近这三天的股市起了一小点的“波澜”。原因就是在“春节”期间,介个股市传统的“红包期”,并且在节前和节后还有不少的企业提交了上市申请的背景下,大盘连跌了三天。这是否就代表市场走势已经发生了改 阅读全文
posted @ 2021-02-25 22:23 划水De雁小明 阅读(228) 评论(0) 推荐(0) 编辑
摘要: 1. 52周存钱挑战 1 import math 2 import datetime 3 4 5 def save_money_in_n_weeks(money_per_week, increase_money, total_week): 6 """ 7 计算n周内的存款金额 8 """ 9 10 阅读全文
posted @ 2021-02-20 21:26 划水De雁小明 阅读(182) 评论(0) 推荐(0) 编辑
摘要: 目前最主流的深度框架有 TensorFlow、Pytorch 以及 Keras。其中: TensorFlow 是被使用最广泛的一个深度学习框架,已广泛的运用在如,图像识别、图片分类等领域。 PyTorch 是一个开源的 Python 机器学习库,基于 Torch 开发,底层由 C++实现,也被广泛使 阅读全文
posted @ 2021-02-20 18:30 划水De雁小明 阅读(4261) 评论(0) 推荐(0) 编辑
摘要: 微积分 导数:当函数y=f(x)的自变量x在一点x0上产生一个增量Δx时,函数输出值的增量Δy与自变量增量Δx的比值在Δx趋于0时的极限a如果存在,a即为在x0处的导数,记作f'(x0)或df(x0)/dx。其图像表示为如下: 类似的概念还有:二维空间中的“切线”。 偏导数:当需要让其他变量不变,只 阅读全文
posted @ 2021-01-30 21:02 划水De雁小明 阅读(223) 评论(0) 推荐(0) 编辑
摘要: 博客在前面几篇随笔中,介绍了在网络环境中浏览器和服务器之间交互的相关内容,下面主要主要从7个方面介绍一款网络抓包代理工具Fiddler,它可以帮助前端开发者和数据分析人员解决很多问题。 一、Fiddler设置(PC端) Fiddler默认是只能抓取http网络格式的,所以我们要先设置下使Fiddle 阅读全文
posted @ 2021-01-24 20:02 划水De雁小明 阅读(801) 评论(0) 推荐(0) 编辑
摘要: 深度学习核心的数据结构是标量、向量、矩阵和张量。 “张量”专属于深度学习TensorFlow框架的名词,这篇先简单汇总线性代数范围内的三种结构及其运算规则:标量、向量、矩阵。以及深度学习领域常用的一个概念:范数 1. 标量 只有数值大小,没有方向的量。 2. 向量及其运算 (常使用的Python扩展 阅读全文
posted @ 2021-01-20 18:23 划水De雁小明 阅读(250) 评论(0) 推荐(0) 编辑
摘要: 在线转换PDF和图片文件 大数据处理的过程中,我们会遇到很多不同类型的数据,其中PDF和图片类文件最为常见,若需要整理这些类型的以便于后期数据分析或展示,而将它们输出成文本格式或关系型表格形式,会是个较好的选择。所以针对这个主题,制作了一个APP专门解决这两类文件格式的转换问题。如下是本地操作视频: 阅读全文
posted @ 2021-01-12 23:33 划水De雁小明 阅读(478) 评论(0) 推荐(0) 编辑