随笔分类 -  SSIS

十三.SSIS数据转换组件_模糊分组转换[转载][补充]
摘要：模糊分组转换执行数据清理工作。它首先查找可能重复的行，然后选择要在对数据进行标准化的过程使用的规范数据行。模糊分组的任务编辑器有下面三个标签: 1. 连接管理器 使用列表框选择现有的 OLE DB 连接管理器，或使用“新建”按钮创建新的连接。 该功能主要是为模糊分组转换算法完成工作所需而需要创建临时 SQL Server 表。创建的表可能会很大，因此在生产服务其只有有限的可用磁盘空间时... 阅读全文
posted @ 2012-07-12 17:14 懒豆 阅读(1296) 评论(0) 推荐(0)
十二.SSIS数据转换组件_导出、导入转换[转载]
摘要：一 导出转换组件 导出列转换读取数据流中的数据,并将数据插入到指定的文件中.次转换使用成对的数入列:一列是要输出的数据,一列是将这些数据输出到哪些文件里.转换在处理时,数据将插入到指定的文件中.如果这些文件不存在,转换将创建这些文件,然后将数据写入到文件中.要写入的数据必须具有DT_Text、DT_NTEXT或DT_IMAGE数据类型。 下面的例子中将介绍如何使用该转换工具。本例演示如何将数... 阅读全文
posted @ 2012-07-12 11:59 懒豆 阅读(563) 评论(0) 推荐(0)
十一.SSIS数据转换组件_复制转换、数据转换、行计数[转载]
摘要：一 复制转换复制列转换是一种很简单的转换机制。它主要是将一列或多列地数据复制一份。然后后续的工作可以对复制的列中的数据做任何操作。而不影响被复制列的数据。下面我们接着上一篇的条件性拆分的包来介绍如何使用复制转换。将复制列转换从工具箱中 托动到数据流选项卡中。并于ExcelSaleOrderCout行计数连接。连接方向是行计数指向复制列转换。双击打开复制列，弹出编辑界面，选择要拷贝的列，并可以重命名。结果如下图:到此复制列转换工具配置完成，接下来你可以从工具箱中拖动任何控件与之连接。使用复制的列。二 数据转换(Data Conversion)数据转换也是一个比较简单的转换组件，它是将输入列的类型 阅读全文
posted @ 2012-07-12 11:24 懒豆 阅读(318) 评论(0) 推荐(0)
十.SSIS数据转换组件_派生列、审核、字符映射转换和条件性拆分转换[转载]
摘要：一 派生列派生列转换通过对输入列进行类型转换或应用表达式得出新的结果。这个结果可以作为新列添加，也可以替换输入列。可以使用此转换执行下列任务：1.将不同列的数据连接到一个派生列中。例如，可以使用表达式 FirstName + " " + LastName 将 FirstName 和 LastName 列中的值组合到名为 FullName 的单个派 生列中。2.通过使用 SUBSTRING 之类的函数从字符串数据中提取字符，然后将结果存储到派生列中。例如，可以使用表达式 SUBSTRING(FirstName,1,1) 从 FirstName 列提取人名的首字母。3.对数值数 阅读全文
posted @ 2012-07-12 10:43 懒豆 阅读(407) 评论(0) 推荐(0)
九.SSIS数据转换组件_聚合转换[转载]
摘要：聚合转换功能类似于sql语句中的聚合函数。它应用列值，并将结果作为新列复制到转换输出中。聚合转换支持下列运算功能运算说明Group by将数据集划分为组。任何数据类型的列都可用于分组。Sum对列中的值求和。只能对数值数据类型的列求和。Average返回列中值的平均值。只能对数值数据类型的列求平均值。Count返回组中项目的数量。Count distinct返回组中的唯一非空值的数量。Minimum返回组中的最小值。Maximum返回组中的最大值。添加并配置聚合转换，则包必须已含有至少一个数据流任务和一个数据源。这里已一个简单的例子来介绍一下如何配置聚合转换。本例子的内容为:聚合每个订单的总金额 阅读全文
posted @ 2012-07-12 09:45 懒豆 阅读(458) 评论(0) 推荐(0)
八.SSIS之数据流任务[转载]
摘要：数据流任务主要用于运行数据流以提取、转换、加载源数据。一个包中可以有多个数据流任务，也可以包含零个数据流任务。下面关系图显示含有一个数据流任务的包： 了解数据流任务后，我们就简要的学习一下如何创建数据流任务。 在工具箱中双击数据流任务控件或则将其拖放到控制流页面中。如图: 你可以根据需求来修改数据流任务的属性。 2. 单击数据流选项卡，从工具箱中拖放一个OLE DB Sou... 阅读全文
posted @ 2012-07-11 17:20 懒豆 阅读(274) 评论(0) 推荐(0)
七.SSIS的控制流之序列容器
摘要：序列容器是一种十分简单，但使用非常广泛的容器，它可以对控制流的任务流组件进行结构化处理，把一些业务相关的任务组件，放到一个序列容器中，使整个包看起来更加整洁、美观，就如同我们家里的书柜、衣柜似的，把不同种类的东西整理在里面，收藏起来，既美观，又易于取用。它是将一个或多个控件作为一个工作单元来处理。例如: 在图中序列容器包含两个执行Sql语句的控件。是将这两个控件组合成一个控件。只有两个控件都执行成功后，才能继续执行下面的流程。序列容器的作用就是这些。不需要配置，也不要编写代码。只要将控件拖放到序列容器即可。有点类似我们C# 中用户控件一样。我这里有一个名为SQLTxt的文件夹里面有连个脚本文件 阅读全文
posted @ 2012-07-11 15:34 懒豆 阅读(553) 评论(1) 推荐(0)
六.SSIS的控制流之Foreach循环容器[转载]
摘要：Foreach循环容器Foreach循环容器定义包中的控制流。其循环的实现类似于编程语言中的Foreach循环结构。SQL Service Integration Services为Foreach容器提供了一下几种枚举类型枚举器配置要求Foreach ADO指定 ADO 对象源变量和枚举器模式。Foreach ADO.NET 架构行集指定与数据库的连接和要枚举的架构。Foreach 文件指定要枚举的文件夹和文件、检索到的文件的文件名格式，以及是否要遍历子文件夹。Foreach 源变量指定包含要枚举的对象的变量。Foreach 项定义 Foreach 项集合中的项，包括列和列数据类型。Forea 阅读全文
posted @ 2012-07-11 11:45 懒豆 阅读(1269) 评论(0) 推荐(0)
五.SSIS的控制流之For循环容器[转载]
摘要：SSIS包由一个控制流以及一个或多个数据流（可选）组成。下面的关系图显示具有一个容器和六项任务的控制流。 这些任务中有五项定义于包级别，还有一项定义于容器级别。任务位于容器内。在控制流中的工具箱.我们可以将工具箱中的控件分为容器控件和任务控件两类。现在我们先了解一下容器包含哪些控件 容器 1.For循环 For循环容器类似于编成语言中的For循环结构。循环每次重复时，For循环容器都计... 阅读全文
posted @ 2012-07-11 10:58 懒豆 阅读(370) 评论(0) 推荐(0)
四.SSIS包的组建之连接管理器[转载]
摘要：接下来的内容我们将学习一下包中各个选项卡的使用.如:连接管理器选项卡、控制流选项卡、数据流选项卡和事件处理选项卡等等。这一篇将介绍一下连接管理器作用以及使用情况。连接管理器的作用是连接到不同类型的数据源以提取和加载数据。任何包的开发都需要提供源数据。下表列出了 SQL ServerIntegration Services 提供的连接管理器类型。类型说明ADO连接到 ActiveX 数据对象 (ADO) 对象。ADO.NET使用 .NET 提供程序连接到数据源。CACHE从数据流或从缓存文件 (.caw) 中读取数据，并可将数据保存到缓存文件。EXCEL连接到 Excel 工作簿文件。FILE连 阅读全文
posted @ 2012-07-10 16:19 懒豆 阅读(317) 评论(0) 推荐(0)
三.SQL Server 2005/2008 与 Office数据通信
摘要：在上一章中学习中，在简历Excel 目标数据源的时候，报错 未在本地计算机上注册“Microsoft.ACE.OLEDB.12.0”提供程序”我的环境是 Windwos 7 X64+SQL Server 2008 + Office 2010 X64 所以需要安装 Microsoft Access Database Engine组件 我尝试安装了 Microsoft Access Database Engine 2010 Redistributable X64版本，但是任然报错，仔细分析了Excel 数据源的连接字符串发现，Excel 的版本号12.0，而office 2010 Excel的版本 阅读全文
posted @ 2012-07-10 16:13 懒豆 阅读(409) 评论(0) 推荐(0)
二.SSIS包的开发[转载]
摘要：在上一章节中我们初步了解了SSIS体系结构以及如何创建一个SSIS包。现在就介绍一下如何在创建的包中使用各个选项卡。打开上一章节创建的SSIS包。整个界面风格如下: 在整个包中包含了控制流选项卡、数据流选项卡、事件处理程序选项卡等等。下面通过一个简单的例子介绍如何利用这些选项卡创建一个完成的工作任务包。 本示例的主要功能是从数据库AdventureWorks中Product表中读取2001... 阅读全文
posted @ 2012-07-10 15:56 懒豆 阅读(219) 评论(0) 推荐(0)
一.SSIS简介[转载]
摘要：SSIS 其全称是Sql Server Integration Services ，是Microsoft BI 解决方案的一大利器.SSIS 的体系结构主要由四部分组成：Integration Services 服务、Integration Services 对象模型、Integration Services 运行时和运行时可执行文件以及封装数据流引擎和数据流组件的数据流任务(如图)： 这是我们初学者必须要了解的，只要明白了这个体系统结构，体会了各组成部分之间的关系，清楚了什么是控制流、什么是数据流，SSIS学起来就不难了。接下来让我们从一个例子来初探一下SSIS的使用.当然要想成功执行示例. 阅读全文
posted @ 2012-07-10 13:36 懒豆 阅读(572) 评论(0) 推荐(0)