文档介绍:Kettle分区应用案例
实际生产中,经常会有地市数据上报或者省厅省厅数据下发,而且各地市的表结构都相同的需求。针对这种需求,假如有10个地市,一般会写10个抽取。这样不仅做了重复工作,而且增加了维护负担。通过kettle分区功能,可以只Kettle分区应用案例
实际生产中,经常会有地市数据上报或者省厅省厅数据下发,而且各地市的表结构都相同的需求。针对这种需求,假如有10个地市,一般会写10个抽取。这样不仅做了重复工作,而且增加了维护负担。通过kettle分区功能,可以只写一个抽取,实现多地市数据汇集和下发功能。下面通过一个案例,简单介绍下kettle分区使用。
新建数据库连接,点击集群选项,此处假定所有节点都是相同类型数据库。
一股
耽首
如下图,创建含有两个节点的集群连接。
I厂
却牺垠RS
2D15/12/3110:3J:4^2015/12/3110:32:4^2015/12/3110幻:业乍mi骂丿13/31
主励琢
诗口
敬是旱£琢
...
1521
lygeng
l/geng
lyg«>£
...
1521
lygeng
tested
tecletl
创建分区模式
新建数据库分区
点击导入分区,可以从刚刚创建的数据库连接中导入分区,点击ok保存。
.割挺库骨区站旳』对话眶
|->戸
DynamicallycreatetheachNumberofpartitionsper弓I日+曰server?
创建抽取模型
整个模型如下
表输入中选择刚刚创建的集群连接,输入SQL语句。这里获取查询SQL语句及预览功
能不能直接使用。
新建…
Wizard...
趣SQL查询语句…
行L列20
允许简扃转换
询走(切
预览(P]
戦尚(C)