03 2014 档案

ssis trainning
摘要:1.防止包打开后hang住,可以使用delay validation=false. 2.2008R2 configuration 起作用的优先级?一是des ign time.二是运行的时候指定的文件 2012的parameter 则是相反。 3.注意SSIS包的32位与64位跑的区别?agentjob 默认是64位的去跑,如果你是包需要在32位下面跑,有选项可以勾选。你可以使用不同folder下面的dtsexec去跑你的job.第三方的driver也许需要设置allow in process? 4.load flat file 可以在source 组件上去掉某些列, 但是不能在conne.. 阅读全文

posted @ 2014-03-31 07:39 tneduts 阅读(287) 评论(0) 推荐(0)

使用SSIS包调度开发的包
摘要:在项目中,开发完自己的packages之后,需要使用agentjob之类的服务来调度自己的package,当然我们也可以使用一个package来调度这些,下面就是我的一个简单的尝试.没有设计得像Agentjob那样复杂,agentjob中的每一个job都包含schedule,然后每一个job有若干个step,每一个step之间还是有依赖关系.我的设计很简单,就是使用一个csv文件保存三列值,一列是order,一列是batfilename,第三列是isenabled. 分别表示执行顺序,batch file的名字,(其实也可以设计成包的路径)和是否执行. 示例如下: 我暂且就叫它MainFra. 阅读全文

posted @ 2014-03-28 07:17 tneduts 阅读(744) 评论(1) 推荐(0)

TSQL点滴
摘要:Q1.什么是bookmark lookup?非聚集索引中叶结点存储的是index keyword 和 rowid(heap table) 或 clusterindex key. 如果查询使用了非聚集索引,但是select中包含了非聚集索引中没有的列,则会使用bookmark lookup ,即返回到聚集索引或page中去找原始数据.如果数据量很大,这样会造成很大的性能损耗,所以建议改成覆盖索引或其他方式. 阅读全文

posted @ 2014-03-28 06:59 tneduts 阅读(167) 评论(0) 推荐(0)

SSIS WITH VERTICA的注意事项总结
摘要:项目中使用到SSIS访问vertica,以下是我使用中总结的一些注意事项:1.vertica对约束的处理方式与之前的DBMS是不同的。以上的截图说明,在使用ado.net provider连接vertica进行数据加载的时候,ssis 返回的信息是不准确的。这不是provider的问题,使用odbc时也遇到过类似的问题。a.在SSIS中图显示全部绿色,表示执行成功,但是到vertica中查询,却没有发现一条记录。后仔细检查发现,source中的数据违反了vertica中的一个not null 约束,数据没有进去,但是没有报错误提示。 Ssis path中显示343条记录,但是实际上只有341条 阅读全文

posted @ 2014-03-22 09:55 tneduts 阅读(1048) 评论(2) 推荐(0)

Excel demo in SSIS
摘要:需求如下,把异常数据从sqlserver数据库中取出来,然后导入到xls中去,然后再发邮件给用户,把xls作为附件发送。需要的示例数据表: /*create table abnormaldata(rowid bigint , rowname nvarchar(20) ,rowvalue nvarchar(100));insert into abnormaldata(rowid,rowname,rowvalue) values(1,'studentname','studentA');insert into abnormaldata(rowid,rowname,ro 阅读全文

posted @ 2014-03-16 15:55 tneduts 阅读(410) 评论(0) 推荐(0)

Mathout
摘要:1. 用Maven搭建Mahout的开发环境,并完成PPT 26页,最简单的例子。要求有过程说明和截图。 2. 用案例的数据集,基于Mahout,任选一种算法,对任意一个女性用户进行协同过滤推荐,并解释推荐结果是否合理,解释过程可以写成一文档说明。 3. 接第2题,增加过滤条件,排除男性,只保留对女性用户的推荐评分,然后进行推荐,并解释推荐结果,是否合理。要求有代码,运行过程抓图,代码的文档说... 阅读全文

posted @ 2014-03-16 11:43 tneduts 阅读(636) 评论(0) 推荐(0)

导航