【实验目的】
1.利用Insight的“Excel输入”等组件,完成复杂表头的Excel数据源处理。
2.熟练掌握“Excel输入”,组件的使用,完成复杂表头的Excel数据源处理。

【实验原理】
通过“Excel输入”选择要最终输出的字段到下一个步骤“追加流”(实验中必须保证每个数据源经过字段选择后,输出的字段都是一致的),再通过“追加流”设置2个数据源的合并顺序,然后通过“追加流”进行多个据源的合并。

【实验环境】
操作系统:Windows10 
Kettle版本:7.1.0.0
jdk版本:1.8.0及以上版本

【实验步骤】

一、建立转换

双击spoon.bat打开kettle。(1)点击新建按钮:

kettle 输出到kafka kettle读取excel_kettle 输出到kafka

,在下拉菜单中点击选择:

kettle 输出到kafka kettle读取excel_字段_02

(2)然后点击:

kettle 输出到kafka kettle读取excel_选项卡_03


重命名该转换文件,保存在某个指定的路径;(3)选择输入步骤、输出步骤和跳。

kettle 输出到kafka kettle读取excel_数据源_04

二、各组件的配置

1.“Excel输入”的配置:

Step1:双击‘Excel输入’组件,配置‘文件’选项卡的表格类型以及

kettle 输出到kafka kettle读取excel_选项卡_05

Step2:配置‘工作表’选项卡,选择输入文件的sheet1,并定义好起始行、列

kettle 输出到kafka kettle读取excel_大数据_06

Step3:配置‘字段’选项卡,获取头部字段名称(多余的字段进行del删除)

kettle 输出到kafka kettle读取excel_选项卡_07

2.“Microsoft Excel 输出”的配置:

Step1:双击‘Microsoft Excel 输出’组件,配置‘文件&工作表’

kettle 输出到kafka kettle读取excel_字段_08

Step2:配置‘内容’选项卡,获取字段名称和格式

kettle 输出到kafka kettle读取excel_大数据_09

三、执行转换

点击按钮,执行转换,结果如下:

kettle 输出到kafka kettle读取excel_数据源_10

四、实验结果:

输入文件‘课程信息表.xlsx’:

kettle 输出到kafka kettle读取excel_kettle 输出到kafka_11

输出文件‘test2.xls’:

kettle 输出到kafka kettle读取excel_kettle 输出到kafka_12

五、实验过程中遇到的困难:

(一)‘表输入’步骤配置因疏忽,未选择输入的文件类型,使得步骤没有可用的输入流,而报错

kettle 输出到kafka kettle读取excel_kettle 输出到kafka_13

kettle 输出到kafka kettle读取excel_选项卡_14

(二)‘表输入’步骤中,配置‘工作表’选项卡时,因选取的起始行不正确致使最终的结果并非期望的那样显示,表输入错误配置如下:

kettle 输出到kafka kettle读取excel_选项卡_15

使得输出结果的字段名称错误,具体如下图所示:

kettle 输出到kafka kettle读取excel_选项卡_16

修改后的起始行如下,并最终得到预期的结果:

kettle 输出到kafka kettle读取excel_选项卡_17

六、实验总结

本次实验主要是掌握“Excel输入”组件的使用,以及完成复杂表头的Excel数据源处理并进行输出。
实验所需的步骤也不难,但要在过程中要注重一些细节,比如在对复杂数据源的处理时,要明确数据源的输入流类型,以及计算明白待获取的输入数据的起始行和起始列的起始数值,避免发生不必要错误。

附件:

kettle 输出到kafka kettle读取excel_大数据_18