一个定时检测压缩包是否存在并处理的Linux脚本

2/22/2017来源:ASP.NET技巧人气:3001

iamlaosong文

压缩包由工作人员不定时FTP到指定的目录,所以我需要一个脚本,每天定时(用crontab)检测是否有上传的压缩包,如果有,则解压、截短文件名,导入数据库,下面是脚本并解释几个关键点:

#timing job:unzip & import costs datafile by iamlaosong 20170215  
#!/bin/sh

BAKDIR=/home/Oracle/ems_suan
BINDIR=/home/oracle/bin/sdpt_js
#OPDATE=`date -d '-1 day' +%Y%m%d`

cd ${BAKDIR}
# OPDATE=today - seq
for i in $(seq 45 -1 7)
do
  OPDATE=`date -d "-$i day" +%Y%m%d` 
  echo ${OPDATE}
  # PRocess SYF zipfile
  zipfile=${OPDATE}*SYF*.zip
  if [ -f ${zipfile} ]; then
    unzip ${zipfile}
    for tfile in ${OPDATE}*SYF*.txt
    do
      tshort=${tfile%SYF*.txt}SYF.txt
      if [ ${tfile} != ${tshort} ]; then
        mv ${tfile} ${tshort}
      fi
    done
    [ ! -d ${OPDATE} ] && mkdir -p ${OPDATE}
    rename _NBCL _ ${OPDATE}*SYF.txt
    mv ${OPDATE}*SYF.txt ${OPDATE}
    mv ${zipfile} all_zip
    cd ${BINDIR}
    ./jsimp.sh ${OPDATE} SYF >/dev/null
    cd ${BAKDIR}
  fi
  # process BCF zipfile
  zipfile=${OPDATE}*BCF*.zip
  if [ -f ${zipfile} ]; then
    unzip ${zipfile}
    for tfile in ${OPDATE}*BCF*.txt
    do
      tshort=${tfile%BCF*.txt}BCF.txt
      if [ ${tfile} != ${tshort} ]; then
        mv ${tfile} ${tshort}
      fi
    done
    [ ! -d ${OPDATE} ] && mkdir -p ${OPDATE}
    rename _NBCL _ ${OPDATE}*BCF.txt
    mv ${OPDATE}*BCF.txt ${OPDATE}
    mv ${zipfile} all_zip
    cd ${BINDIR}
    ./jsimp.sh ${OPDATE} BCF >/dev/null
    cd ${BAKDIR}
  fi
done
1、for i in $(seq 45 -1 7)

产生一个45到7的序列,用于产生距当天多少天的日期,以便检测那个日期的压缩包是否存在。

2、tshort=${tfile%SYF*.txt}SYF.txt

产生一个短文件名,将多余的不确定部分截掉,详细见linux中如何批量截短文件名 3、rename _NBCL _ ${OPDATE}*SYF.txt

批量修改文件名,将文件名中的部分字符改成其它字符,见linux下批量修改文件名,本例是为了去掉一些字符。

4、zipfile=${OPDATE}*SYF*.zip

这个赋值有点意思,如果文件存在,其中的通配符“*”会转换成相应的字符,如果不存在,则将“*”直接赋给变量。

5、导入程序执行较慢,如果上传的压缩包过多,就会发生头天脚本还没结束,第二天又会定时启动一个新的脚本,为避免此事的发生,脚本前面应该加一段检测代码,如果有导入进程,则退出处理,代码如下:

sdpt=$(ps -ef|grep sdpt_js)
sdpt=${sdpt#*./}
if [ ${sdpt:0:7}="sdpt_js" ]; then
  echo The import program is running.
  exit
fi

其中${sdpt#*./}是截取“./”后面的字符串,而${sdpt:0:7}则是取前7个字符,如果是“sdpt_js”就退出处理。