ETL开发工具KETTLE使用教程「建议收藏」
大家好,又见面了,我是你们的朋友全栈君。
Kettle的建立数据库连接、使用kettle进行简单的全量对比插入更新:kettle会自动对比用户设置的对比字段,若目标表不存在该字段,则新插入该条记录。若存在,则更新。
Kettle简介:Kettle是一款国外开源的ETL工具,纯java编写,可以在Window、Linux、Unix上运行,数据抽取高效稳定。Kettle 中文名称叫水壶,该项目的主程序员MATT 希望把各种数据放到一个壶里,然后以一种指定的格式流出。Kettle这个ETL工具集,它允许你管理来自不同数据库的数据,通过提供一个图形化的用户环境来描述你想做什么,而不是你想怎么做。Kettle中有两种脚本文件,transformation和job,transformation完成针对数据的基础转换,job则完成整个工作流的控制。(引用百度百科)
1、Kettle的下载与安装(在本文中使用的kettle版本为6.1.0.1-196)
2、打开kettle。
首先解压下载下来的压缩包如:pdi-ce-6.1.0.1-196.zip
然后打开Spoon.bat,如图所示:
打开后请耐心等待一会儿时间。
3、建立转换。
在文件->新建装换。
新建转换后在左边的主对象树中建立DB连接用以连接数据库。如图所示:
建立数据库连接的过程与其他数据库管理软件连接数据库类似。
注意:在数据库链接的过程中,可能会报某个数据库连接找不到的异常。那是因为你没有对应的数据库链接驱动,请下载对应驱动后,放入kettle的lib文件夹。
4、简单的数据表插入\更新
(1)新建表插入
在左边的面板中选择“核心对象”,在核心对象里面选择“输入->表输入”,用鼠标拖动到右边面板。如图所示:
双击拖过来的表,可以编辑表输入。
选择数据库连接和编辑sql语句,在这一步可以点击预览,查看自己是否连接正确。
(2)通过插入\更新输出到表。
在左边面板中选择核心对象、选择“输出->插入\更新”如图所示:
编辑插入更新:
首先:表输入连接插入更新。
选中表输入,按住shift键,拖向插入更新。
然后:双击插入更新,编辑它。
到这里基本上,这个转换就要做完了,可以点击运行查看效果,看是否有误,这个要先保存了才能运行,可以随意保存到任何一个地方。
5、使用作业控制上面装换执行。
使用作业可以定时或周期性的执行转换,新建一个作业。并从左边面板拖入start 和转换。
双击start可以编辑,可以设置执行时间等等
点开装换,可以设置需要执行的转换任务,比如可以执行上面我们做的转换,XXX.ktr
最后点击运行即可。
到这里,一个简单的通过作业调度的kettle就算做完了。
发布者:全栈程序员栈长,转载请注明出处:https://javaforall.cn/136625.html原文链接:https://javaforall.cn
相关文章
- 绿色守护使用教程-Android省电省内存利器
- Keil 使用教程(详解)「建议收藏」
- Git2.21下载安装及使用教程
- 管家婆软件【货位管理】使用教程
- Postman使用教程详解「建议收藏」
- 使用优启通(EasyU)重装系统教程(详细)「建议收藏」
- 移动机械硬盘测试软件,硬盘检测工具HDTune使用教程
- android sdk安装过程,图文详解Android 3.0 SDK安装教程
- 在centos系统中安装MySQL使用教程
- VSCode 使用教程-6.Auto Rename Tag自动同步修改的html标签
- WPS 2013软件下载和安装教程
- AMD-Xilinx MPSoC的Watchdog在Linux中使用的简明教程
- 怎么使用阿里巴巴矢量图标库图文教程
- 开源图书《Python完全自学教程》12.6机器学习案例12.6.2猫狗二分类
- Elastic Stack 实战教程 4:使用 Fleet 管理 Elastic Agent 监控应用
- chatgpt怎么使用,chatgpt详细使用教程
- 使用PyTorch-LSTM进行单变量时间序列预测的示例教程
- Burp Suite使用教程(1)
- 《Drools7.0.0.Final规则引擎教程》第5章 session使用说明详解编程语言
- 使用PostgreSQL精通数据库管理(postgresql教程)
- Spring Boot 2 快速教程:WebFlux 集成 Mongodb(四)
- Linux系统下如何安装SVN?——简单又实用的教程(linux系统安装svn)
- 数据库Redis进阶详细的使用指南(数据库redis使用教程)
- 语言连接教程 MySQL的下载及C语言连接教程,帮助初学者快速掌握使用MySQL数据库,并学会用C语言连接MySQL数据库
- android开发教程之获取使用当前api的应用程序名称