一个Flink API的废弃引发的血案

王知无 大数据技术与架构

By 大数据技术与架构 场景描述:Flink API废弃后的一个问题。

大家担心的终于来了。

问题

前两天群友反应了一个问题: Flink1.9进行了数据类型的转化,目前使用的Type被弃用,推荐使用Datatypes类型,但是之前使用的Type类型的方法对应的schema typeinformation没有对应的API,无法使用。

解决办法

整个问题的根本原因是废弃了一个tablesink的注册方法。

解决方案如下:

代码如下:


TableSink csvSink = new CsvTableSink("/path/to/file", "|");
String[] fieldNames = {"product", "amount"};

TypeInformation[] fieldTypes = {Types.STRING, Types.INT};

DataType[] newFieldType = {DataTypes.STRING(), DataTypes.INT()};
TypeInformation<?>[] newtypeInformations = TypeConversions.fromDataTypeToLegacyInfo(newFieldType);

// 也可以下面这样
//TypeInformation<?> str = LegacyTypeInfoDataTypeConverter.toLegacyTypeInfo(DataTypes.STRING());
//TypeInformation<?> integ = LegacyTypeInfoDataTypeConverter.toLegacyTypeInfo(DataTypes.INT());
//TypeInformation[] newTypInfo = {str, integ};
tableEnv.registerTableSink("RubberOrders", fieldNames, newtypeInformations, csvSink);

思考

没有最坑,只有更坑,请问Flink集群大家升级了几次了?