IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 系统运维 -> Shell开发脚本 通过SFTP 定时 上传文件 -> 正文阅读

[系统运维]Shell开发脚本 通过SFTP 定时 上传文件

作者:template-box

【背景】

与三方公司对接,有数据传输需求,数据传到对方的服务器,对方提供的传输方式是SFTP

【思路】

数据来自于ORACLE,项目先提供在服务器上使用sqluldr2来操作【数据导出】工作,之前的博客有提到大批量数据【导入】工具sqluldr,注意不要弄混了,然后把数据存到指定的文件下,接着通过crontab 任务定时调用传输工具脚本就行了,之前未接触过SFTP,这次遇到一些坑,网上查了许多文章没有我需要的,简单记录一下:

1.FTP传输示例

先放之前FTP上传下载文件的做法,连接到指定IP和端口 把用户名和密码写在后面 进入指定的路径,完成操作即可,提醒一下,确保执行脚本的电脑有FTP

ftp -ivn <<EOF
	open 172.X.X.X 21
	user ftp_user ftp_passWord
	binary
	lcd /opt/yj/ChannelDataFolder/  
	mput *.txt
	quit
EOF

2.SFTP传输示例

spawn sftp -oPort=端口 sftp_name@sftp_ip
expect  {
    "password:" { send "sftp_password\r" }
}

expect "sftp> "
send "cd sftp_path\r"
expect "sftp> "
send "put data.txt\r"
expect "sftp> "
send "bye"

个人觉得SFTP与FTP在 SHELL脚本最大的区别就在于,ftp可以一步到位,sftp多了一个交互的过程,实现就需要考虑如何跟sftp服务器完成交互,最开始做的时候看着一些代码段直接拿来用,后面这也不行那也不行,原来自己没有安装expect 这个工具,一切操作要在这个工具支持下完成,tcl和expect都要安装。

下载安装示例

下载地址如下:
https://download.csdn.net/download/u012972294/84232811

下载两个包,分别解压  注:假设两个包存放地址为,/usr/local/src

1。先安装tcl

  进入tcl解压目录,然后进入unix目录

  #./configure

  #make

  #make install

2.后安装expect  注:如果目录和上述不一致,需要更换到你解压的目录,千万注意路径问题!

  进入expect解压目录

  #./configure --with-tclinclude=/usr/local/src/tcl8.4.19/generic/ --with-tclconfig=/usr/local/lib/

  #make

  #make install

完成,测试

  #expect

  expect1.1> 
  expect1.1>

【可能遇到的问题点】

1.expect安装完成且测试通过,但是运行报错提示:expect spawn not found

网上很多方法,我试过都不行,我的处理方式执行的时候这么写:

expect -f ./XXX.sh

2.执行脚本的时候各种提示,无法识别定义的变量、shell命令等,具体原因暂时没有弄明白,只好折中处理,把变量直接写到sftp命令里面,把传输工具和数据提取分为两个部分,互不干涉。

  系统运维 最新文章
配置小型公司网络WLAN基本业务(AC通过三层
如何在交付运维过程中建立风险底线意识,提
快速传输大文件,怎么通过网络传大文件给对
从游戏服务端角度分析移动同步(状态同步)
MySQL使用MyCat实现分库分表
如何用DWDM射频光纤技术实现200公里外的站点
国内顺畅下载k8s.gcr.io的镜像
自动化测试appium
ctfshow ssrf
Linux操作系统学习之实用指令(Centos7/8均
上一篇文章      下一篇文章      查看所有文章
加:2022-03-11 22:36:33  更:2022-03-11 22:36:45 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/16 2:56:28-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码