mb61cd4c97cd9d5的博客_hadoop,linux,datastage

datastage Transformation 函数之 UpCase和DownCase

Downcase(column): 此函数将输入的字符串转换为小写input = 'This is me'input1 = 'this is me'input2 = 'THIS IS ME'DownCase(input) = 'this is me'DownCase(input1) = 'this is me'DownC

datastage

字符串转换

原创 2022-01-17 15:43:08 207 阅读

datastage作业正常导入，但是运行时失败，报找不到OshExecuter.sh

今天生产环境有个作业异常报错，在开发环境修改此作业后，往生产上重新导入此作业时，导入正常，但是运行时，报找不到OshExecuter.sh ，查看RT_SC目录后

datastage

系统故障

生产环境

官网

原创 2022-01-17 15:42:53 228 阅读

db2 connector加载数据时报SQL1476N

在开发环境上运行程序正常，但是测试环境时报错Message: DB2_Connector_0,1: [Input link 0] SQLExecute reported: SQLSTATE = 40506: NativeError Code = -1,476: Msg = [IBM][CLI Driver][DB2/LINUXX8664] SQL1476N The currenttra

sql

官网

linux

计算机

原创 2022-01-15 10:19:21 587 阅读

datastage因ftp作业超时报错的解决

作业报错信息如下：ECIF_FTP,0: error: ftp returned 426ftp msg: 426 Data connection: Error 0错误分析：CBS_BDSKH中sql语句如下：SELECT a.kehhao, a.gerzwm,a.gerywm, a.guobdm,a.jinnbz, a

datastage

sql

报错信息

ftp服务器

计算机

原创 2022-01-15 10:19:20 87 阅读

datastage解决cannot get exclusive access to a log for a job的方发

dastage运行作业时会在数据库中指定一个session，防止一个作业在运行时被重复调度，但是当作业异常中止时，这个锁可能不会被自动释放，导致此作业无法删除或者编译。这时需要手动释放这个锁。解锁方式如下cd $DSHOME. ./dsenv启动uvsh命令bin/uvshLOGTO projectnameLIST DS_JOBS jobname #查看作业NO L

datastage

无法删除

数据库

异常中止

计算机

原创 2022-01-15 10:19:20 894 阅读

解决安装oracle时 xhost: unable to open display

1) 确保下面的包已经安装 xorg-x11-xauth xorg-x11-fonts-* xorg-x11-utils 2) 确认 sshd配置文件中X11Forwarding的配置为yes X11Forwarding yes

oracle

配置文件

计算机

原创 2022-01-15 10:19:20 876 阅读

欢迎使用CSDN-markdown编辑器

欢迎使用Markdown编辑器写博客本Markdown编辑器使用StackEdit修改而来，用它写博客，将会带来全新的体验哦：Markdown和扩展Markdown简洁的语法代码块高亮图片链接和图片上传LaTex数学公式UML序列图和流程图离线写博客导入导出Markdown文件丰富的快捷键快捷键加粗 Ctrl + B 斜体 Ctrl + I 引用 Ctrl

x11

数学公式

离线

markdown编辑

计算机

原创 2022-01-15 10:19:20 42 阅读

datastage Transformation函数之INDEX

Index(String, Substring, Occurrence): 它将会返回输入的字符在字符串中的起始位置。我们可以用它来实现grep命令判断指定的字符是否在输入的字符串中的功能 Ex:-1. 判断'le'是否存在于字符串'Incol'中 If Index(Incol, 'le', 1) > 0 then

datastage

字符串

大小写敏感

计算机

原创 2022-01-15 10:19:19 303 阅读

如何在服务端查看dastage作业的JOBNO 作业目录等信息

有时候在服务器上批量管理作业的时候需要知道作业的JOBNO用于清理日志，或者备份作业的时候需要知道作业的具体目录，这时候通过designer或者director来查看作业信息，工作量将会非常巨大，分享一个查找作业NO及目录的脚本# Script Name - DSgetJobNo.sh # Developer - Atul Singh # Description - This

datastage

服务器

unix

linux

计算机

原创 2022-01-15 10:19:19 54 阅读

datastage join时无数据输出

join的两只输入都有数据，但是输出无数据，修改input的分区方式为hash分区即可

数据

计算机

原创 2022-01-15 10:19:19 99 阅读

datastage jobmoitor失效

运行作业时报如下警告:main_program: Failed to initialize job monitoring. Monitor information will not be generated.检查jobmonit进程，进程正常检查端口，端口也正常官网上说/etc/hosts文件中0.0.0.0 myhost这一行是多余的，如果确认无用的话，删除掉即可

重启

官网

计算机

原创 2022-01-15 10:19:19 121 阅读

控制datastage sequence作业中某一个作业报错时，整个数据流报错

在Automatically handle activies that fail前打勾即可

计算机

原创 2022-01-15 10:19:19 71 阅读

datastage status code的含义

Status Code是运行dsjob命令后的回归值，以下是StatusCode的设定意义Status Code含义0This is the only status means the job is actually running1Job finished

计算机

原创 2022-01-15 10:19:18 371 阅读

datastage中新建用户

登录控制台以isadmin用户登录选择Administration选项卡浏览器左端依次点击如下按钮浏览器有段点击新建用户新建用户并赋权将新建立的用户映射到DS引擎中

datastage

用户登录

新建用户

选项卡

计算机

原创 2022-01-15 10:19:18 320 阅读

datastage TD connector报错

在使用Teradata Connector加载数据时，原数据加载方式为Bulk Load，因Bulk Load消耗资源比较高，顾将小于2G的文件的加载方式修改为Bulk Stream；但是修改后作业报如下错误Job step STATUS_TABLE_SETUP completed successfully TPT_INFRA: TPT02111: Error: Operator libs

客户端

官网

数据加载

计算机

原创 2022-01-15 10:19:18 358 阅读

datastage常用术语

DataStage Term DescriptionDataStage AdministratorClient program that is used to manage the project of DataStage.DataStage serverDataStage se

sed

xml

ide

计算机

原创 2022-01-15 10:19:18 196 阅读

切换datastage应用用户

Datstage安装时需要指定一个对应的应用用户，默认的应用用户为dsadm，安装完成后如需切换用户为depuser，需做如下修改cd $DS_HOME修改.dsadmin文件中dsadm为depusercd /opt/IBM/InformationServerchown –R deposer:depgroup Server此方法虽能强行修改为depuser用户

计算机

原创 2022-01-15 10:19:17 164 阅读

datastage作业hang住

最近生产上经常有ds作业hang住，杀掉进程重做后偶尔成功，偶尔不成功，报错信息如下 main_program: (aptoci.C:500). Message: ORA-12152: TNS:unable to send break message (aptoci.C:637). Message: ORA-03114: not connected to ORACLE

datastage

oracle

数据

客户端

原创 2022-01-15 10:18:00 324 阅读

用VB脚本批到导入字段到PowerDesigner

在PowerDesigner使用脚本批量导入excel中记录的表结构信息,由于需要通过powerdesigner逆向工程创建一些sybase IQ的表，由于是接口数据，只有excel表，手动导入太耗时了（几十张），所以百度了一下批量导入execl的方法，发现可以执行vb脚本来读excel表格，从而批量生成表结构图。这是EXCEL格式:Option Explicit Dim ...

表结构

数据

批量导入

转载 2022-01-15 10:16:09 413 阅读

datastage中使用jdbc方式连接数据库（以oracle为例）

在datastage 9.12版本之后开始支持jdbc connector stage连接数据库，配置及使用方式如下1.配置驱动配置文件（IS_HOME/Server/DSEngine目录下,IS_HOME是 InfoSphere Information Server 的home目录）cd /opt/IBM/InformationServer/Server/DSEnginevi isj...

oracle

sql

jar

原创 2022-01-15 10:15:58 509 阅读 1收藏

datastage登陆报错Failed to authenticate the current user against the selected Services Tier

虚拟机重启之后发现ds登录不了了，报错原因如下All DataStage client logins fail with following error dialog: Failed to authenticate the current user against the selected Services TierlassDefFoundError: com.ibm.iis.

重启

数据库

计算机

原创 2022-01-15 10:15:42 1070 阅读

FAILED: Fetch statement failed: Encoding or code set not supported

JDBC升级到3.50.JC1之后，正在使用多字节代码集的客户可能会收到以下错误："FAILED: Fetch statement failed: Encoding or code set not supported. " error -79783原因JDBC版本3.50.JC1引入了以下APAR：IC49877 - JDBC驱动程序允许插入字符集的无效字符。虽然此A

多字节

服务端

驱动程序

计算机

原创 2022-01-15 10:15:42 309 阅读

awk实现文件反序输出

awk实现文件反序输出源文件Beth 4.00 0Dan 3.75 -1Kathy 4.00 10Mark 5.00 20Mary 5.50 22Susie 4.25 18awk脚本 {line[NR]=$0}END {i=NR while(i>0){ print line[i]

awk

脚本

源文件

计算机

原创 2022-01-15 10:15:42 618 阅读

datastage文件入库乱码问题

源文件字符集为ISO8859，目标数据库为DB2，数据库编码为UTF8工程字符集设置的为默认编码UTF8，文件直接入库后发现数据库中的中文为乱码解决方式：作业级的NLS配置保持不变，默认为UTF8SequentialFile配置NLS为GBK，在字段扩展中添加UnicodeTransfo

datastage

数据库

源文件

ico

计算机

原创 2022-01-15 10:15:42 749 阅读

datastage服务的停止与启动

停止服务Infosphere Datastage停止服务的顺序如下 停止Engine服务 停止ASB Agent服务 停止WebSphere Application Server（WAS）服务具体步骤如下：（1）以root用户登录Infosphere Datastage服务器（2）检查是否有残留进程检查job产生的进程ps -ef | grep phantom检查para...

root用户

java

默认值

计算机

原创 2022-01-15 10:15:42 582 阅读

datastage错误之Adaptive job monitoring feature is disabled; could not create polling thread

DataStage作业偶尔失败，并出现以下错误：Message: APT_CombinedOperatorController(17),1: Adaptive job monitoring feature is disabled; could not create polling thread: Resource temporarily unavailable.Message: cs}}...

环境变量

linux服务器

解决方法

计算机

原创 2022-01-15 10:15:41 581 阅读

datastage dsengine因空间不足启动报错

df -h 查看磁盘空间的使用情况删除无用的文件释放空间后重启即可

重启

计算机

原创 2022-01-15 10:15:41 145 阅读

datastage lookup组件报 Field 'column name' has keyprep export buffer overrun error

在datastage中使用lookup组件时报错如下Field 'column name' has keyprep export buffer overrun errorFiled keylookup on table ('/tablename'),Key value:'key value'解决方法，修改输入字段和映射字段的长度一致即可 ...

字段

解决方法

计算机

原创 2022-01-15 10:15:41 286 阅读

datastage错误之 ODBC_Connector_0: ODBC Info: SQLSTATE = 42000: Native Error Code = 7,405:

报错信息 ODBC_Connector_0: ODBC Info: SQLSTATE = 42000: Native Error Code = 7,405: Msg = [IBM(DataDirect OEM)][ODBC SQL Server Legacy Driver][SQL Server]异类查询要求为连接设置 ANSI_NULLS 和 ANSI_WARNINGS 选...

sql

报错信息

计算机

原创 2022-01-15 10:15:41 800 阅读

datastage错误之Consumed more than 100,000 bytes looking for record delimiter; aborting

在DataStage处理比较大的列时，您可能看到的上图的错误消息“Consumed more than 100,000 bytes looking for record delimiter; aborting"原因：默认情况下，每个字段的最大长度（以字节为单位）是100,000字节。其次，DataStage作业需要在单个块中传输每个记录。块的默认大小为128KB。可以设置多个环境变量来...

环境变量

分隔符

四舍五入

计算机

原创 2022-01-15 10:15:40 271 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

mb61cd4c97cd9d5的博客