【背景】
与三方公司对接,有数据传输需求,数据传到对方的服务器,对方提供的传输方式是SFTP
【思路】
数据来自于ORACLE,项目先提供在服务器上使用sqluldr2来操作【数据导出】工作,之前的博客有提到大批量数据【导入】工具sqluldr,注意不要弄混了,然后把数据存到指定的文件下,接着通过crontab 任务定时调用传输工具脚本就行了,之前未接触过SFTP,这次遇到一些坑,网上查了许多文章没有我需要的,简单记录一下:
1.FTP传输示例
先放之前FTP上传下载文件的做法,连接到指定IP和端口 把用户名和密码写在后面 进入指定的路径,完成操作即可,提醒一下,确保执行脚本的电脑有FTP
ftp -ivn <<EOF
open 172.X.X.X 21
user ftp_user ftp_passWord
binary
lcd /opt/yj/ChannelDataFolder/
mput *.txt
quit
EOF
2.SFTP传输示例
spawn sftp -oPort=端口 sftp_name@sftp_ip
expect {
"password:" { send "sftp_password\r" }
}
expect "sftp> "
send "cd sftp_path\r"
expect "sftp> "
send "put data.txt\r"
expect "sftp> "
send "bye"
个人觉得SFTP与FTP在 SHELL脚本最大的区别就在于,ftp可以一步到位,sftp多了一个交互的过程,实现就需要考虑如何跟sftp服务器完成交互,最开始做的时候看着一些代码段直接拿来用,后面这也不行那也不行,原来自己没有安装expect 这个工具,一切操作要在这个工具支持下完成,tcl和expect都要安装。
下载安装示例
下载地址如下:
https://download.csdn.net/download/u012972294/84232811
下载两个包,分别解压 注:假设两个包存放地址为,/usr/local/src
1。先安装tcl
进入tcl解压目录,然后进入unix目录
#./configure
#make
#make install
2.后安装expect 注:如果目录和上述不一致,需要更换到你解压的目录,千万注意路径问题!
进入expect解压目录
#./configure --with-tclinclude=/usr/local/src/tcl8.4.19/generic/ --with-tclconfig=/usr/local/lib/
#make
#make install
完成,测试
#expect
expect1.1>
expect1.1>
【可能遇到的问题点】
1.expect安装完成且测试通过,但是运行报错提示:expect spawn not found
网上很多方法,我试过都不行,我的处理方式执行的时候这么写:
expect -f ./XXX.sh
2.执行脚本的时候各种提示,无法识别定义的变量、shell命令等,具体原因暂时没有弄明白,只好折中处理,把变量直接写到sftp命令里面,把传输工具和数据提取分为两个部分,互不干涉。
|