【背景】

与三方公司对接,有数据传输需求,数据传到对方的服务器,对方提供的传输方式是SFTP

【思路】

数据来自于ORACLE,项目先提供在服务器上使用sqluldr2来操作【数据导出】工作,之前的博客有提到大批量数据【导入】工具sqluldr,注意不要弄混了,然后把数据存到指定的文件下,接着通过crontab 任务定时调用传输工具脚本就行了,之前未接触过SFTP,这次遇到一些坑,网上查了许多文章没有我需要的,简单记录一下:

1.FTP传输示例

先放之前FTP上传下载文件的做法,连接到指定IP和端口 把用户名和密码写在后面 进入指定的路径,完成操作即可,提醒一下,确保执行脚本的电脑有FTP

ftp -ivn <<EOF
	open 172.X.X.X 21
	user ftp_user ftp_passWord
	binary
	lcd /opt/yj/ChannelDataFolder/  
	mput *.txt
	quit
EOF

2.SFTP传输示例

spawn sftp -oPort=端口 sftp_name@sftp_ip
expect  {
    "password:" { send "sftp_password
" }
}

expect "sftp> "
send "cd sftp_path
"
expect "sftp> "
send "put data.txt
"
expect "sftp> "
send "bye"

个人觉得SFTP与FTP在 SHELL脚本最大的区别就在于,ftp可以一步到位,sftp多了一个交互的过程,实现就需要考虑如何跟sftp服务器完成交互,最开始做的时候看着一些代码段直接拿来用,后面这也不行那也不行,原来自己没有安装expect 这个工具,一切操作要在这个工具支持下完成**,tcl和expect都要安装。**

下载安装示例

下载两个包,分别解压  注:假设两个包存放地址为,/usr/local/src

1。先安装tcl

  进入tcl解压目录,然后进入unix目录

  #./configure

  #make

  #make install

2.后安装expect  注:如果目录和上述不一致,需要更换到你解压的目录,千万注意路径问题!

  进入expect解压目录

  #./configure --with-tclinclude=/usr/local/src/tcl8.4.19/generic/ --with-tclconfig=/usr/local/lib/

  #make

  #make install

完成,测试

  #expect

  expect1.1> 
  expect1.1>

【可能遇到的问题点】

1.expect安装完成且测试通过,但是运行报错提示:expect spawn not found

网上很多方法,我试过都不行,我的处理方式执行的时候这么写:

expect -f ./XXX.sh

2.执行脚本的时候各种提示,无法识别定义的变量、shell命令等,具体原因暂时没有弄明白,只好折中处理,把变量直接写到sftp命令里面,把传输工具和数据提取分为两个部分,互不干涉。