随笔分类 -  ETL数据清洗技巧

ETL进行数据清洗技巧
摘要:如何用Power Query在Excel或者PowerBI里面实现不一样的排序呢?  顺序排序(1234排序)  标准比赛排名(1224排序)  修改后的比赛排名(1334排序)  密集排名(1223排序)  分数排名(1/2.5/2.5/4排序) 阅读全文
posted @ 2019-11-29 11:04 马丁叔叔 阅读(5720) 评论(0) 推荐(0)
摘要:第二节 将文本文件数据导进数据库 该小节介绍如何用BIML生成ssis包,将货币文本导入到数据库currency的表中。 SSIS组件: 输入 文本文件如下,目标表Currency存在于数据库中。 Currency.csv CurrencyCode Name CNY 元 USD 美元 JPY 日元 阅读全文
posted @ 2019-05-10 10:01 马丁叔叔 阅读(605) 评论(0) 推荐(0)
摘要:本小节将用BIML建一个简单的可以执行的包。 阅读全文
posted @ 2019-04-16 09:33 马丁叔叔 阅读(505) 评论(0) 推荐(0)
摘要:Power Query 是做数据转换、数据清洗的利器,不管是在Excel还是PowerBI,如何玩好Power Query是成功建模的必不可少的一步。 阅读全文
posted @ 2019-04-12 19:15 马丁叔叔 阅读(7747) 评论(0) 推荐(0)
摘要:BIML 101 - BIML 快速入门教程 做大数据的项目,最花时间的就是数据清洗。 没有一个相对可靠的数据,数据分析就是无木之舟,无水之源。 如果你已经进了ETL这个坑,而且预算有限,并且有大量的活要做; 时间紧,任务多,是不是有点菊花一紧的感觉。 多少次,你对着几个月前自己写的代码在挠头, 多 阅读全文
posted @ 2019-04-04 04:08 马丁叔叔 阅读(772) 评论(0) 推荐(0)