随笔分类 -  Data Science

Python配置管理的几种方式
摘要：一、 为什么要使用配置 如果我们在较复杂的项目中不使用配置文件，我们可能会面临下面的情况： 你决定更改你的项目中数据库的 host， 因为你要将项目从测试环境转移到实际的上产环境中。如果你的项目中多个位置用到了这个 host，那你不得不一个一个找到这些位置再修改成新的 host。花了半天，然后过了一 阅读全文
posted @ 2019-07-05 18:25 清涛 阅读(7508) 评论(1) 推荐(1)
Airflow 入门教程&示例
摘要：[TOC] 导入模块 设置默认参数 在我们创建任务的时候我们可以使用这些默认参数 实例化一个DAG 我们需要一个 DAG 对象来嵌入我们的任务，下面的代码中，我们首先定义一个字符串，作为DAG的唯一标识，然后传入默认的参数字典(上面定义的)，然后定义调度的间隔为1天 任务 实例化 operator 阅读全文
posted @ 2019-05-07 17:05 清涛 阅读(15064) 评论(0) 推荐(0)
pandas 使用 df.product 条件筛选报错Keyerror:False
摘要：如上图，我在使用 的时候报错 ，但是从第一条命令中明明可以看到有符合条件的记录。 使用属性取值不行，便思考用索引取值的方法是否可以 让人感到奇怪的是索引取值的方法是可以得到正确结果。那么问题应该是出现在属性取值上。 我又一一试了 ,'sale.country'等的属性取值，也都可以出现正确答案。 那 阅读全文
posted @ 2019-04-30 14:25 清涛 阅读(4776) 评论(0) 推荐(0)
Mysql 用 not in 不返回任何结果的原因及解决方案
摘要：原因 相当于 ，如果 后面跟的是子查询，子查询中只要包含一个 的返回值，则会造成 整个 字句返回空值，查询不会返回任何结果。 但 相当于 ,可以处理子查询中返回 的情况,返回正确的结果。 解决方案 为防止 返回空值，可以在子查询的Where 语句后筛掉为空的记录，例如： 阅读全文
posted @ 2019-04-22 18:28 清涛 阅读(1520) 评论(0) 推荐(0)
用户行为分析初探
摘要：什么是用户行为？ 广义来讲，用户行为是指网站、APP、H5、小程序等线上平台，以及零售商铺、产品使用环境等所有场景下，用户与企业以及企业提供的产品的交互情况。 什么是用户行为分析？ 通常所说的用户行为分析，通过对用户线上行为数据、用户属性数据的收集，存储，分析，以找到相关规律，然后通过A/B测试等方 阅读全文
posted @ 2019-02-13 17:35 清涛 阅读(1014) 评论(0) 推荐(0)
tableau 如何跨行跨列计算
摘要：问题描述 如下图所示，我们试图将工作表中的 B2/A1, B3/A2, B4/A3, B5/A4 的值计算出来，但是表计算中只有百分比差异，这里需要跨行跨列的计算，这时候就需要用到 LOOKUP函数了。 <! more 因此我们需要用到下面的公式： 阅读全文
posted @ 2019-01-05 12:47 清涛 阅读(1852) 评论(0) 推荐(0)