streamsets 3.5 的一些新功能
streamsets 3.5 有了一些新的特性以及增强,总之是越来越方便了,详细的可以
查看官方说明,以下简单例举一些比较有意义的。
origins
- 新的pulsar 消费origin
- jdbc 多表消费者以及jdbc 查询消费者功能增强
- salesforce 组件增强
- websocket 组件增强,对于microservice pipeline 可以发送响应到源请求了
processors
- 新的加解密字段处理器
- 新的mongodb 查找处理器
- 新的http 路由处理器
- 字段类型转换的增强
- salesforce 查找处理器的增强
目的
- 新的pulsar 生产者组件
- 新的syslog 组件
executors
- 新的databricks 执行器
其他
- 数据格式的扩展
- stages 的增强
- sdc edge 的增强(windows event log tensorflow。。。。)
参考资料
https://streamsets.com/documentation/datacollector/latest/help/datacollector/UserGuide/WhatsNew/WhatsNew_Title.html#concept_hz3_5fk_fy