一、背景上一篇文章（单表数据迁移）用kettle实现了一张表的数据迁移。但实际情况中，数据库会有几百，几千张表，而kettle的表输入和表输出只能选择一张表，我们不可能一个个地填写表名。这时候，我们要考虑 通过循环实现多表的数据迁移。二、前期准备与单表数据迁移类似准备好Oracle和MySQL的库，Oracle到Oracle也可以，转移，只是必须提前在kettle文件夹的lib目录下放入各个数据库
转载
2024-06-01 08:12:56
248阅读
软硬件环境：kettle6.1/oracle11gR2/windows7/redhatlinux 时间:2016/7/28问题描述： 在kettle第一次连接本机oracle的时候，总是报错，提示“确保安装好jar包”，自己就换了一个远程上的linux_oracle，还是提示相同的问题问题解决：上
原创
2016-08-11 14:14:20
5633阅读
使用KETTLE调用存储过程1.创建调用存储过程的转换1.1创建转换点击右上角【文件】->【新建】->【转换】1.2添加步骤1.2.1 在新创建的转换中添加【表输入】，【调用DB存储过程】步骤 在右侧【核心对象】中搜索【表输入】，【调用DB存储过程】将其拖到新创建的转换中即可 1.2.2 连接【表输入】和 【调用DB存储过
转载
2023-08-28 12:28:30
1183阅读
一.同步思路Mysql数据导入oracle中思路：首先在oracle中建一张和mysql中表中字段一样的表(oracle中的表字段要包含mysql中表的字段)，然后再在oracle中建一张只存id的表，当使用kettle的job时，首先执行一个sql查询oracle中的id表的id的最大值(因为mysql中的id设置是自增长的),然后表输入的时候执行sql查询mysql中要导入的表的数据，这里的s
转载
2023-12-24 10:28:11
77阅读
kettle下载 kettel这里我使用的是国内镜像下载，国外相对较慢下载kettle点击到页面是这样 这里我没有使用最新版本的，选了一个相对稳定的版本6.1，点击直接下载下载完成后解压如下界面启动直接运行Spoon.bat,这里我们先不要启动，因为还有一些配置首先有的人说需要jdk环境变量，这里我没有测试，因为我本身就有环境变量然后因为因为我们需要连接oracle和mysql，所以我们需要准备想
转载
2023-12-14 15:43:43
117阅读
导读Excel数据导入Oracle数据库的方法：1、使用PL SQL 工具附带的功能，效率比较低可参考这篇文章的介绍：http://www.2cto.com/database/201212/176777.html2、使用Kettle工具，免费，相比之下功能更丰富，可实现一定的业务逻辑，推荐使用注：Kettle下载后解压即可使用，但是依赖jvm，可以安装一下JDK 1.7（推荐）Excel数据导入O
转载
2024-03-24 14:21:37
171阅读
kettle下载 kettel这里我使用的是国内镜像下载，国外相对较慢下载kettle点击到页面是这样 这里我没有使用最新版本的，选了一个相对稳定的版本6.1，点击直接下载下载完成后解压如下界面启动直接运行Spoon.bat,这里我们先不要启动，因为还有一些配置首先有的人说需要jdk环境变量，这里我没有测试，因为我本身就有环境变量然后因为因为我们需要连接oracle和mysql，所以我们需要准备想
转载
2023-12-14 12:11:49
92阅读
原创
2021-12-27 10:15:19
183阅读
kettle数据抽取可以分为转换和作业。转换是进行单独的从一个表抽到另一个表，如果多个呢？？那么就需要作业，在作业里可以调用多个转换，同步或是异步都可以。我们今天就先来讲一个简单的转换。首先打开kettle1.点击文件--->新建----->转换。如下如2.从左边的列表里面的核心对象-->输入--->表输入。选中表输入，然后拖到右边3.点击拖动的表输入会出现如下如的对话框，
转载
2023-10-20 21:19:05
116阅读
1 问题现象： 之前做的kettle 连接某个oracle数据库 做表抽取脚本的表输入信息如下图：执行时（脚本上传到linux机器 用sh命令执行的）表输入报的错误信息：但是在机器里面用sqlplus 命令登录却可以成功：2 解决过程： 出现问题后，一开始联系 源数据系统 厂家 看是不是他们那边数据库做了 限制。 经过他们查看，他们那边没有做限制。这边也查不到原因 后来参照别的系统 发
转载
2024-03-25 09:48:02
133阅读
问题1:加载不了驱动Kettle 不包含jdbc的驱程 所以需要把Ojdbc6.jar 放到 Kettle目录下4.X: \libext\JDBC5.x: \lib 问题2：没打开监听症状： 同一台机能连上数据库，Kettle 连不上。原因是：DataBase Name填错了。正确是填下面语句查到的INSTANCE_NAME select INSTANCE_NAME from v$in
转载
2023-06-15 20:10:12
164阅读
导读Excel数据导入Oracle数据库的方法：1、使用PL SQL 工具附带的功能，效率比较低2、使用Kettle工具，免费，相比之下功能更丰富，可实现一定的业务逻辑，推荐使用注：Kettle下载后解压即可使用，但是依赖jvm，可以安装一下JDK 1.7（推荐）Excel数据导入Oracle示例Kettle将Excel数据导入Oracle过程记录如下：1、准备Excel文件注意:Excel文件要
转载
2023-10-10 21:36:42
549阅读
使用kettle连接数据库报错：ORA-12505, TNS:listener does not currently know of SID given in connect descriptor ORA-12505: TNS: 监听程序当前无法识别连接描述符中所给出的SID原来是以前的数据库用的是sid监听，现在是servicename了。由： 改为：
转载
2024-06-12 08:10:39
230阅读
1 kettle安装及运行kettle官网下载地址,下载完毕后大概有800多m 下载完毕后，直接解压，双击Spoon.bat进行运行。 如果在你的电脑上启动之后，没有进入下面的页面，那么就换台机器。修改 Spoon.bat中java内存参数不一定好使。if "%PENTAHO_DI_JAVA_OPTIONS%"=="" set PENTAHO_DI_JAVA_OPTIONS="-Xms1024m"
转载
2024-03-25 20:38:03
158阅读
本期与大家分享的是，小北精心整理的大数据学习笔记，数据采集工具Kettle 的详细介绍一、Kettle概述1、什么是kettleKettle是一款开源的ETL工具，底层是纯Java编写，可以在Window、Linux、Unix上运行，绿色无需安装，数据抽取高效稳定。2、Kettle工程存储方式（1）以XML形式存储（2）以资源库方式存储(数据库资源库和文件资源库)3、Kettle的两种设计4、Ke
转载
2023-08-28 14:40:54
488阅读
1. 利用 excel中的数据生成xml文件kettle中的xml文件输出组件的功能其实是很弱的，所以要生成较为复杂的xml文件时需要使用组件：
add xml , xml join, placeholder, js script 等等使用merge join主要是为了减少在xml join中需要匹配的结果集合（因为xml join中的匹配功能其实是很
转载
2023-12-25 12:23:55
56阅读
一、 Kettle集群概述1) Kettle集群简介 集群技术可以用来水平扩展转换，使得他们能够同时运行在多台服务器上。它将转换的工作量均分到不同的服务器上。这一部分，我们将介绍怎样配置和执行一个转换，让其运行在多台机器上。一个集群sc
转载
2023-08-26 23:53:42
1066阅读
依然在北京，早上停电了，整个人感觉对不好了，接下来就说一下在使用ETL工具kettle做数据校验的时候遇到的一些问题，一级解决方案.1：数据校验效果图下图：原始表数据（需要校验的表数据）对上表数据进行校验，校验规则，order_nane、order_type不为空，order_money2>order_money2视为有效 校验结果如下图所示:在展现工具BIEE中具有会写功能，根据
转载
2023-08-24 10:49:48
173阅读
一、集群的原理与优缺点1.1集群的原理 Kettle集群是由一个主carte服务器和多个从carte服务器组成的，类似于master-slave结构，不同的是’master’处理具体任务，只负责任务的分发和收集运行结果。Master carte结点收到请求后，把任务分成多个部分交给slave carte执行，slave执行完毕
转载
2023-08-03 15:02:11
304阅读
本次例子主要介绍关于如何读取mysql数据存到oracle的完整例子。关于kettle的入门使用有兴趣的可以看我的上一篇文章一、表介绍 本次例子主要涉及到四张表，分别是 oracle临时表：r_temp_value； oracle历史数据表：r_sample_value； oracle实时表：r_stock_value； oracle电站表：r_hydrepower； mysql的数据表：r_sa
转载
2024-02-29 13:48:57
181阅读
