kettle-8.3.0.0：MySQL增量插入和更新

今天药忘吃喽~ 2023-06-25 14:28 9阅读 0赞

# 目的 #

在数据库A和数据库B中分别创建表userA和表userB。最终目标为将数据表userA中的数据插入更新到数据表userB中。

create database testA;
    use testA;
    create table `userA`(
        `id`int(10) primary key,
        `name` varchar(50),
        `age` int(3)
    )ENGINE=InnoDB DEFAULT CHARSET=utf8;
    insert into userA values(1,'张三',25);
    insert into userA values(2,'李四',29);
    insert into userA values(3,'王五',28);
    insert into userA values(4,'赵六',28);
    
    create database testB;
    use testB;
    create table `userB`(
        `idB`int(10) primary key,
        `nameB` varchar(50),
        `ageB` int(3)
    )ENGINE=InnoDB DEFAULT CHARSET=utf8;
    insert into userB values(1,'张三',20);
    insert into userB values(2,'李四',21);
    insert into userB values(3,'王五',22);

# 操作步骤 #

1、运行软件，进入主界面。点击左上角的 **文件 → 新建 → 转换 ，**新建一个转换，并保存，转换的后缀名为.ktr。

![format_png][]

2、点击面板左侧的 **主对象树** ，选择 **DB连接** 右键，选择 **新建** 或 **新建数据库连接向导** 分别创建对数据库A和数据库B的连接。

![format_png 1][]

![format_png 2][]

![format_png 3][]

![format_png 4][]

![format_png 5][]

3、点击面板左侧的 **核心对象** ，选择 **输入**文件夹下的 **表输入** 并把它拖到右侧的编辑区中。

![format_png 6][]

4、双击编辑区的“表输入”图标，编辑数据输入源。

![format_png 7][]

5、点击面板左侧的 **核心对象** ，选择 **输出**文件夹下的 **插入/更新** 并把它拖到右侧的编辑区中，按住 **shift** 画线连接 “**表输入**”。

![format_png 8][]

6、双击编辑区的 “**插入/更新**” 图标，编辑控件内容。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzMyMjUyOTE3_size_16_color_FFFFFF_t_70][]

用来查询的关键字，此处只选择主键id，表示这里按照id查询，如果此id存在，则更新数据，若不存在则插入数据。

7、到这里，我们最简单的一个插入/更新数据的转换已经建立完成了，点击 “**校验这个转换**”，Kettle会校验并给出简单的报告。没有任何问题。

![format_png 9][]

8、点击“**运行这个转换**”，选择“**本地执行**”，点击“启动”来执行这个转换。

![format_png 10][]

9、转换成功后，我们可以在控制台中看到如下信息。检查本地数据库，数据库A的userA表中的数据已经全部被插入更新到了数据库B的userB表中。

![format_png 11][]

**注：此示例适用于插入和更新目标源数据，无法将已经源表中的删除的记录同步到目标表中**

![format_png 12][]

[format_png]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly91cGxvYWQtaW1hZ2VzLmppYW5zaHUuaW8vdXBsb2FkX2ltYWdlcy80NzczNDY1LTEwNjJkNzhkYjNjZDRmZDIucG5n?x-oss-process=image/format,png
[format_png 1]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly91cGxvYWQtaW1hZ2VzLmppYW5zaHUuaW8vdXBsb2FkX2ltYWdlcy80NzczNDY1LWE1YjI0MzAyOGMyNDY2NjEucG5n?x-oss-process=image/format,png
[format_png 2]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly91cGxvYWQtaW1hZ2VzLmppYW5zaHUuaW8vdXBsb2FkX2ltYWdlcy80NzczNDY1LTAyMGM1ZjZkMTM0MWExZmEucG5n?x-oss-process=image/format,png
[format_png 3]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly91cGxvYWQtaW1hZ2VzLmppYW5zaHUuaW8vdXBsb2FkX2ltYWdlcy80NzczNDY1LWUzZmQ4MjA3ODdjZTJjZmQucG5n?x-oss-process=image/format,png
[format_png 4]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly91cGxvYWQtaW1hZ2VzLmppYW5zaHUuaW8vdXBsb2FkX2ltYWdlcy80NzczNDY1LTdkOTMyZjliMzg5YjhiOTQucG5n?x-oss-process=image/format,png
[format_png 5]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly91cGxvYWQtaW1hZ2VzLmppYW5zaHUuaW8vdXBsb2FkX2ltYWdlcy80NzczNDY1LWRjMDU1MjE4N2ExNmI3ZjYucG5n?x-oss-process=image/format,png
[format_png 6]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly91cGxvYWQtaW1hZ2VzLmppYW5zaHUuaW8vdXBsb2FkX2ltYWdlcy80NzczNDY1LThmZjMwN2NlOTRkNTMyOTUucG5n?x-oss-process=image/format,png
[format_png 7]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly91cGxvYWQtaW1hZ2VzLmppYW5zaHUuaW8vdXBsb2FkX2ltYWdlcy80NzczNDY1LTJiMDBhYjljYTEzMjMwNjYucG5n?x-oss-process=image/format,png
[format_png 8]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly91cGxvYWQtaW1hZ2VzLmppYW5zaHUuaW8vdXBsb2FkX2ltYWdlcy80NzczNDY1LWM4ODE2NmVjODAxYzg4MGEucG5n?x-oss-process=image/format,png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzMyMjUyOTE3_size_16_color_FFFFFF_t_70]: https://img-blog.csdnimg.cn/20191229165354694.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzMyMjUyOTE3,size_16,color_FFFFFF,t_70
[format_png 9]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly91cGxvYWQtaW1hZ2VzLmppYW5zaHUuaW8vdXBsb2FkX2ltYWdlcy80NzczNDY1LTIyMjVkZmE4N2YxZGQxOGIucG5n?x-oss-process=image/format,png
[format_png 10]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly91cGxvYWQtaW1hZ2VzLmppYW5zaHUuaW8vdXBsb2FkX2ltYWdlcy80NzczNDY1LTc0YWU2OWQyYzY1M2E2NDYucG5n?x-oss-process=image/format,png
[format_png 11]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly91cGxvYWQtaW1hZ2VzLmppYW5zaHUuaW8vdXBsb2FkX2ltYWdlcy80NzczNDY1LTgyNGMzN2RlMWI3MzU3YTUucG5n?x-oss-process=image/format,png
[format_png 12]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly91cGxvYWQtaW1hZ2VzLmppYW5zaHUuaW8vdXBsb2FkX2ltYWdlcy80NzczNDY1LWIyZmZjMDgzOWRlODMwODgucG5n?x-oss-process=image/format,png