How to download files by date using Linux shell ftp-Linux Operation and Maintenance-php.cn

Home

Operation and Maintenance

Linux Operation and Maintenance

How to download files by date using Linux shell ftp

Sep 18, 2017 am 10:22 AM

linux shell download

最近做项目遇到这样的需求要求ftp获取远程数据的文件，根据文件的创建时间点下载文件。下面小编给大家分享知识点小结，感兴趣的朋友要求看看吧

需求：ftp获取远程数据的文件，根据文件的创建时间点下载文件。可以自行扩展根据文件的大小等其他需求。

知识点总结：

1、获取文件的时间：

ls -lrt|awk '{print $6" "$7" "$8}'

时间内容：

Sep 8 16:03

2、时间格式转换

date -d "Sep 8 16:03" +%Y%m%d%H%M

转换结果：

201709081603

3、指定文件名，正则匹配

pattern=&quot;${month}.*.dat$&quot;
ls -lrt |awk &#39;$9 ~ /&#39;$pattern&#39;/ {print $6&quot; &quot;$7&quot; &quot;$8}&#39;

Copy after login

注意awk里面模式变量用' '括起来，.*为任意字符，$表示以dat结尾。pattern的内容根据需求自行设定

4、对文件时间进行比较

ls -lrt |awk &#39;$9 ~ /&#39;$pattern&#39;/ {\
     ctime=&quot;date -d \&quot;&quot;$6&quot; &quot;$7&quot; &quot;$8&quot;\&quot; +%Y%m%d%H%M&quot;; \
     ctime|getline filetime; if( filetime &gt; &#39;$checktime&#39; ) print $9 ; }

Copy after login

获取文件的时间，对时间进行转换，然后对转换后的时间与给定的$checktime进行比较，如果比$checkime的时间大，则显示文件名。

|getline 为执行命令获取命令执行的结果。

以上就完成了对本地文件时间进行比较的方法。接下来判断远程主机的文件时间。

5、ftp命令登录远程主机，并过滤得到要查询的文件内容

ftp_cmd(){
ftp -i -n &lt;&lt;!
open $ftp_ip
user $get_user $get_pwd
binary
cd ${get_dir}
lcd ${local_dir}
$*
bye
!
}
pattern=&quot;${month}.*.dat$&quot;
files=$(ftp_cmd ls -lrt |awk &#39;$9 ~ /&#39;$pattern&#39;/ {\ 
ctime=&quot;date -d \&quot;&quot;$6&quot; &quot;$7&quot; &quot;$8&quot;\&quot; +%Y%m%d%H%M&quot;; \ 
ctime|getline filetime; if( filetime &gt; &#39;$checktime&#39; ) print $9 ; }&#39;|xargs)

Copy after login

通过函数调用实现ftp到指定主机，cd到指定目录，通过awk获取ls -lrt的结果，然后计算时间，把大于指定时间的文件名获取到。

6、下载文件

ftp_cmd mget $files

Copy after login

The above is the detailed content of How to download files by date using Linux shell ftp. For more information, please follow other related articles on the PHP Chinese website!

Statement of this Website

The content of this article is voluntarily contributed by netizens, and the copyright belongs to the original author. This site does not assume corresponding legal responsibility. If you find any content suspected of plagiarism or infringement, please contact admin@php.cn