想请问大神们，kettle如何不通过裁剪表的方式推送新增数据

两种方法，第一种是用kettle本身的插入更新组件，通过主键判断是insert还是update，但是性能不高，针对数据量少的情况可使用，另一种方法是通过主键先删再增，即查的新增数据后，先执行主键删除，再表输出到目标表，这样就不会误删其他数据。

前言

近几天组内交给我一个任务，就是研究kettle的restful接口的调用。可是之前学习和接触的大部分都是数仓、BI以及一部分简单程序、脚本的编写，所以对restful接口不是很了解（但只是用工具调用的话，不需要太深的了解，只需要知道这是一种可以调用的API接口，实现某种功能就行了），所以在网上查找了很多资料，但其实对于调用来说，只需要知道在我们在调用这个接口时，需要哪些参数，应该怎样传入就可以了。感觉上好像很简单，但其实里面有很多坑，接下来我们就开始吧

正文

1、首先，我们要知道我们需要调用的接口的URI，简单理解就是你要调用的资源的地址，就像门派号一样，用到什么命令，传递什么参数。一般而言，需要让你进行调用，都会把这部分内容列出来，比如：

在这个API中，可以看到具体的信息，①是 *** 作行为，②是传递的body，③是请求头，在此就不多说了，该部分内容大家可以自行查阅资料，对这些内容我可能比大家还不清楚。知道我要调用的API之后，就可以通过kettle设计转换流程了。

一、生成记录

因为只是一个测试，所以我直接通过生成记录组件生成了我所需要的内容，ps:这里不仅仅可以配置单条记录，其实多条同样请求的记录同样会分别请求。

url是将要post的资源，post后得到关于token的response，然后再利用token进行其余的请求。

body是post的函数体，post时，有的需要带body才能通过。

url2是真正要进行调用的API，都在生成记录里预生成了。

二、REST Client配置

三、JSON Input

利用JSON Input接收由REST Client获取的结果，只保留token的值。此处JSON路径如何设置不多赘述，请读者自行查阅JSON路径的配置。

对于JSON Input 3中获取Cookie是为了调用真正的API做准备。如果没有带Cookie，后续的调用就无法确定是否进行了登录。在一个网页中，我们先进行登录，然后继续后续 *** 作，后续每次 *** 作都不需要再次登录，是因为我们将服务器传给我们的session存入了客户端/浏览器的cookie中，每次我们做请求，都会带上cookie，就不需要重复登录了。但是此处如果不获取cookie，因为是分离开的，所以后一步就会出现会话无效的错误。如下图所示：

四、记录集连接

因为cookie和token在不同的表中，所以需要将两张表join起来，join的 *** 作大家应该都很熟悉了。如果不清楚，后续可以留言我给大家进行补充。最后留下我们需要的几个参数，URL2、token、cookie

五、调用API

以上就是全部内容，如果有什么疑问或者有什么疏漏，欢迎大家指正。

以上就是关于想请问大神们，kettle如何不通过裁剪表的方式推送新增数据全部的内容，包括:想请问大神们，kettle如何不通过裁剪表的方式推送新增数据、关于kettle的REST Client组件带cookie(session)的使用、等相关内容解答，如果想了解更多相关内容，可以关注我们，你们的支持是我们更新的动力！