猪莫慌

随笔分类 -  ETL

ETL详解
摘要:一:ETL概括 ETL是将业务系统的数据经过抽取、清洗、转换之后加载到数据仓库的过程,目的是将企业中分散、凌乱、标准不统一的数据整合到一起,为企业决策提供分析依据。 ETL是BI项目重要的一个环节,通常情况下,在BI项目中ETL会花掉整个项目至少1/3时间,ETL设计的好坏直接关系BI项目的成败。 阅读全文

posted @ 2019-08-13 16:05 猪莫慌 阅读(510) 评论(0) 推荐(0)

数据全量抽取与增量抽取
摘要:一:数据抽取介绍 数据抽取,是指从源数据系统抽取数据到目标数据源系统。 数据抽取分为全量抽取和增量抽取。 二:全量抽取 将数据源中的表或视图原封不动的从数据库中抽取到目标系统。 三:增量抽取 捕获变化数据,仅对自上次导出之后变化数据(增、删、改)进行抽取。 对捕获方法有两点要求 1:准确 2:不要对 阅读全文

posted @ 2019-08-09 11:08 猪莫慌 阅读(6260) 评论(0) 推荐(0)

win系统kettle定时调度文件创建与部署
摘要:一:批处理文件(.bat文件) @echo onset str_time_first_bit="%time:~0,1%" if %str_time_first_bit%==" " ( set str_date_time=%date:~0,4%%date:~5,2%%date:~8,2%0%time: 阅读全文

posted @ 2019-08-08 17:48 猪莫慌

导航