2015 年 7月 3 日随笔档案 - duanxz

2015年7月3日

摘要：首先建立转换：从数据库表到日志表输入的设置：日志设置：新建job:转换选择刚才建好的输出日志转换。变量设置如下：此ID就是转换中的${ID}，执行job，可以看到控制台输出日志结果：黑色字体部分中只写出了id=1的一条记录。最后补充，将转换的日志写到数据库中：打开转换>ctrl+t>日志选项卡>转换... 阅读全文

posted @ 2015-07-03 17:56 duanxz 阅读(10150) 评论(0) 推荐(0)

ETL之Tungsten Replicator

摘要： 1 概述 1.1 介绍 Tungsten Replicator是数据库集群和复制供应商Continuent推出的高性能、开源的数据复制引擎，是Continuent最先进的集群解决方案的核心组件之一，特别适合作为异构数据库之间数据迁移的解决方案。 Tungsten Replicator最新的稳定版本是阅读全文

posted @ 2015-07-03 17:48 duanxz 阅读(6766) 评论(0) 推荐(0)

Loading Data into HDFS

摘要： How to use a PDI job to move a file into HDFS.PrerequisitesIn order to follow along with this how-to guide you will need the following:HadoopPentaho D... 阅读全文

posted @ 2015-07-03 17:36 duanxz 阅读(512) 评论(0) 推荐(0)

可用于Hadoop下的ETL工具——Kettle

摘要：看大家分享了好多hadoop相关的一些内容，我为大家介绍一款ETL工具——Kettle。 Kettle是pentaho公司开源的一款ETL工具，跟hadoop一样，也是java实现，其目的就是做数据整合中时数据的抽取（Extract）、转换（Transformat）、加载（Load）工作。Kett... 阅读全文

posted @ 2015-07-03 17:23 duanxz 阅读(2172) 评论(0) 推荐(0)

mysql函数之九：MySql取得日期（前一天、某一天）

摘要：取得当天： SELECT curdate(); mysql> SELECT curdate();+ +| curdate() |+ +| 2013-07-29 |+ + 取得当前日期： mysql> select now();+ +| now() |+ +| 2013-07-29 22:10:40 阅读全文

posted @ 2015-07-03 17:10 duanxz 阅读(1797) 评论(0) 推荐(0)

进程间通信和线程间通信的几种方式

摘要：进程进程（Process）是计算机中的程序关于某数据集合上的一次运行活动，是系统进行资源分配和调度的基本单位，是操作系统结构的基础。在早期面向进程设计的计算机结构中，进程是程序的基本执行实体；在当代面向线程设计的计算机结构中，进程是线程的容器。程序是指令、数据及其组织形式的描述，进程是程序的实体。阅读全文

posted @ 2015-07-03 15:35 duanxz 阅读(552) 评论(0) 推荐(0)