kettle 利用 api接口获取指定的数据，需要传参，转换应该怎么设计？

▍Memor.ヾ浅陌、 2019-09-06 10:11:03

kettle 利用 api接口获取指定的数据，需要传参，转换应该怎么设计？

...全文

320 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

Nanguaflyy 2022-02-16

打赏
举报

回复

怎么样，会弄了吗，怎么弄的

Kettle作为开源ETL工具，使用较多（因为不花钱）。最近我个人在使用的时候遇到了需要将hive的数据以Json的格式推动到API接口。调用API使用的是Kettle的组件“rest client”。具体的流程如下：因为向下游推送数据时候，需要先获取 Token密码，再拼接为API的URL 。所以，第一步需要先获取Token密码： ...

使用的jar包：具体jar包获取可以参考这里编译获取https://blog.csdn.net/weixin_43889494/article/details/132211256? 如图所示，我们需要一个连接源(输入对象和输出对象使用了同一个源)、一个表输入对象、一个表输出对象、一个hop对象。2.数据源，这里数据源使用了常规jdbc url,驱动，账号，密码形式，一般使用国产化关系型数据库用这个即可。用kettle来完成如图所示的样例表输入->表输出。1.初始化kettle环境(非常重要)

使用kettle调度接口数据到数据库

有时候，上一章讲解是以GET方式请求，直接连接就可以获取，如果为POST请求方式呢，需要传入JSON参数，那我下面以请求钉钉打卡里面获取考勤数据为演示（都是工作中实战练习），如果想看如何获取钉钉API可以看下一章 POST：需要传入指定JSON参数，不能在浏览器直接预览 GET：可传入也不用传入，可以在浏览器直接预览操作步骤 1、运行软件，进入主界面。点击左上角的文件 → 新建 → 转换新建一个转换，并保存，转换的后缀名为ktr。 2、点击面板左侧的主对象树，选择DB连接右键，选择...

获取接口数据导入数据库接口中的数据一般为[JSON格式](https://baike.baidu.com/item/JSON/2462549?fr=aladdin)，详情可点击查看。下面进入正题，大致为下图所示（1）HTTP client （2） JSON input

17,086

社区成员

55,238

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章