技术头条 - 一个快速在微博传播文章的方式     搜索本站
您现在的位置首页 --> 系统运维 --> lftp利器与一次故障分析

lftp利器与一次故障分析

浏览:1943次  出处信息

   FTP服务器和客户端软件都异常丰富,标准的FTP客户端一般情况下已经够用,但是lftp可能才是最强大的FTP客户端软件!这玩意十分不可思议!可以称得上FTP中的战斗机!

   缘起

   需求是通过git拉取静态文件到本地,然后FTP发布到又拍云上,开发同学觉得每次都用FileZilla效率太低,想要一个自动的脚本。FTP目录结构是:用户登录进去的根目录就是线上资源的目录,根下面的develop目录才是开发测试的目录!需要分别同步开发和测试的目录!思考过标准的FTP命令工具,都需要很大的工作量做文件对比,上传、下载、删除等操作。后来,终于发现lftp存在mirror这种类似rsync的逆天功能,可以对整个目录递归做同步!

   lftp比标准的FTP强大不少,还有很多其它值得研究的命令,建议以后FTP客户端首选lftp!

   同步脚本(有bug)

   cat deploy_static.sh

#!/bin/bash

host="ftp://ftp.youpai.com"
username="username"
password="yourpassword"
local_path="/home/xnow"
remote_path="/develop"

lftp -c "open $host
user $username $password
lcd $local_path 
cd $remote_path 
mirror --reverse --delete --dereference --verbose \
   --exclude-glob=.git/     #<==强大的mirror功能
"

   脚本故障

   这个脚本用了一段时间,都很不错,直到某天开发同学急匆匆找我说把测试的资源发布到线上了,现在全部手动做了一次才恢复!分析问题原因发现git里的数据都是正常的,于是调出发布脚本deploy_static.sh的日志,发现有两次错误,一次是连接服务器失败,最近的一次执行过程中cd切换到开发目录的时候失败,报了550错误!是碰上又拍云不靠谱的时候了吗?

   这就是问题的原因:在切换到线上开发目录失败的情况下,脚本继续向下执行,导致把本地开发目录同步到线上正式环境目录!于是,嘭~~

   解决办法

   基于上面的分析,找到了几条解决思路:

  • 把开发目录和正式目录分开,分别使用不同的账号,要花钱!

  • 把开发和正式目录放在同级,比如说/online是正式的,/develop是开发的,即使切换目录失败,也不会相互影响!要改线上代码!

  • 检测脚本的命令返回值,类似于bash,但是lftp好像还没高级到支持if这些语法,除非使用expect,重写脚本,麻烦!

       以上是在第一时间内想到的所有办法,似乎都不简单!


  •    柳暗花明:更好的办法

       测试的时候发现lftp支持&&这种方式执行语句,只有在上一个命令成功的情况下在继续执行下一个命令,几乎和Bash一样!!!于是,一切困难迎刃而解~

       修改后的脚本在每个lftp命令后加上了&&,仅仅是几个符号而且,简单得想哭!

       修改过后的暂无bug版deploy_static.sh:

       cat deploy_static.sh

    #!/bin/bash
    
    host="ftp://ftp.youpai.com"
    username="username"
    password="yourpassword"
    local_path="/home/xnow"
    remote_path="/develop"
    
    lftp -c "open $host
    user $username $password && \
    lcd $local_path && \
    cd $remote_path && \
    mirror --reverse --delete --dereference --verbose \
       --exclude-glob=.git/     #<==强大的mirror功能
    "
    
QQ技术交流群:445447336,欢迎加入!
扫一扫订阅我的微信号:IT技术博客大学习
© 2009 - 2024 by blogread.cn 微博:@IT技术博客大学习

京ICP备15002552号-1