2021-10-09

**

第四章 CSV文件、JSON文件数据的抽取

**一、CSV文件的抽取

1.创建转换csv_extract;
打开Kettle,依次点击 文件 -> 新建 -> 转换,创建新转换(保存可修改转换名)。点击核心对象,展开输入步骤,选中CSV文件输入控件,拖入Kettle工作区;展开输出步骤,选中表输出控件,拖入Kettle工作区,并用Hop跳线连接。
2021-10-09

2.配置“CSV文件输入”控件;
2021-10-09
预览数据
2021-10-09

3.配置MySQL数据库连接;
单击“新建”,配置数据库连接连接,此处的数据库名为extract,需要提前在SQLyog建立(两处用户名与密码相同)。配置内容如下:
2021-10-09
点击“测试”观察是否成功连接上数据库:
2021-10-09

4.配置“表输出”控件;
2021-10-09
点击目标表旁边的浏览,选择csv表。
2021-10-09
单击“确定”,返回上一界面,将“指定数据库”打钩,选择“数据库字段”,可直接点击“获取字段”,也可选择“输入字段映射”,弹出“映射匹配”对话框,依次选中“源字段”和“目标字段”中的字段,点击“Add"即可,效果如下:
2021-10-09
2021-10-09

5.运行转换并查看数据表csv中的数据。
2021-10-09
已成功抽取CSV文件csv_extract.csv中的数据保存至数据库extract中的数据表csv中。

二、JSON文件的抽取

1.创建转换json_extract;
2021-10-09

2.配置“JSON input”控件;
2021-10-09
点击“增加”,将所选择的文件添加到“选中的文件”处,点击“字段”,进入其界面,添加要抽取的数据字段,最后点击确定完成JSON Input控件的配置:
2021-10-09
配置JSON Input2控件。双击进入其界面,勾选“源定义在一个字段里?”复选框;在“从字段获取源”后的下拉列表中 选择字段名,即data:
2021-10-09
进入“字段”,操作同上,从data中抽取field和value字段,点击确定。2021-10-09

3.配置MySQL数据库连接;(同上)

4.配置“表输出”控件;
2021-10-09

5.运行转换并查看数据表json中的数据。
2021-10-09

上一篇:用Kettle工具抽取CSV文件和JSON文件


下一篇:转载-xpath举例