shell脚本实现ftp上传下载文件

2023-08-21 10:05:34

　　前段时间工作中需要将经过我司平台某些信息核验数据提取后上传到客户的FTP服务器上，以便于他们进行相关的信息比对核验。由于包含这些信息的主机只有4台，采取的策略是将生成的4个文件汇集到一个主机上，然后在这台主机上将文件上传的目标ftp服务器。

1，建立主机A到其他三台主机之间的信任关系，以便于远程拷贝文件

#生成主机A的本地认证秘钥，可以选择生成rsa或者dsa类型的秘钥，这里选取rsa

[root@A ~]#ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa >/dev/null 2>&1

#将本机的秘钥拷贝的其他三台主机的authorized_keys文件中，由于只有三台主机，一个一个执行就行，如果主机数量多，可以使用expect脚本批量执行

[root@A ~]#ssh-copy-id -i ~/.ssh/id_rsa.pub "-p 22 root@192.168.1.B"

[root@A ~]#ssh-copy-id -i ~/.ssh/id_rsa.pub "-p 22 root@192.168.1.C"

[root@A ~]#ssh-copy-id -i ~/.ssh/id_rsa.pub "-p 22 root@192.168.1.D"

#出现让输入B、C、D的root密码时，输入密码后回车，出现如下提示时表示建立本机到目标主机的信任关系成功

Now try logging into the machine, with "ssh '-p 22 root@192.168.1.B'", and check in:

  .ssh/authorized_keys

to make sure we haven't added extra keys that you weren't expecting.

2，建立上传文件到目标FTP服务器的脚本

　　客户的要求是每天凌晨上传前一天的数据，我们生成的数据文件都是以当天日期_主机名_Result.csv类型的。

#以下展示脚本的内容

[root@A getfile] cat upload_csv.sh

#!/bin/bash

#此脚本用于每天定时将生成的数据文件上传到客户FTP服务器

#指定上传文件所在的主目录

SRCDIR=/tmp/test_jr/getfile/files/

#指定所需上传对端FTP服务器的目录

DESDIR=/JRAQ_FILE/

#指定对端FTP服务器的用户名和密码

USER=finftp

PASSWD="ABC@123"

#指定目标FTP服务器的IP

IP=3.3.3.3

#指定目标FTP服务器端口，一般都是默认

PORT=

#指定所要上传文件的日期

targetDay=`date -d "-1 days" +"%Y%m%d"`

#获取所要上传的文件

cd $SRCDIR

for host in 192.168..B 192.168..C 192.168..D

do

    scp root@$host:$SRCDIR/$targetDay_*_Result.csv ./

done

#判定文件是否获取正确

[ $? -eq  ] || echo "Copy romote files failed, pls check." >>$SRCDIR/upload_file.log

#上传文件到FTP服务器

ftp -ivn <<EOF

    open $IP $PORT

    user $USER $PASSWD

    binary

    cd $DESDIR

    lcd $SRCDIR

    put ${targetDay}_*_Result.csv

    quit

EOF

#判定文件是否上传成功

[ $? -eq  ] && echo "Upload $targetDay's files to romote FTP server successful." >>$SRCDIR/upload_file.log || echo "Upload files failed, pls check." >>$SRCDIR/upload_file.log

3，有可能用到的转码

　　由于csv文件是可以用Excel打开的，但是Excel打开utf-8编码的文件时，所有中文名称会显示乱码，此时就需要用到转码，比如将utf-8格式转换成gbk编码的，Excel就可以完美打开了。

[root@A ~]iconv -futf8 -tgbk -c -o file2.csv file1.csv

#file1是待转码的文件

#file2是转码后文件名

#-f --from-code 即从那种格式转化

#-t --to-code 转化为那种格式

#-o --output 输出的文件名

#-c 忽略输出的非法字符  加这个参数是防止文件中有某些非法字符串，如果不加此参数iconv遇到非法字符串后会自动终止转码，即使后面还有正常的未转码的字符。

码农公寓

相关文章