cron/iccat.cron

   1 #!/usr/bin/env bash
   2 umask 002
   3 sleep 26
   4 set -e
   5
   6 #export MAILTO=contact_admin@nirgal.com,
   7
   8 VARDIR=/var/lib/ais/iccat
   9 HTMLFILE=$VARDIR/`date -u +%Y%m%d`.html
  10 wget -q http://www.iccat.int/en/vesselsrecord.asp -O $HTMLFILE
  11 FILENAME=`python -m ais.iccat_getrarfilename $HTMLFILE`
  12 RARURL=http://www.iccat.int$FILENAME
  13 FILENAME=`basename $FILENAME`
  14
  15 echo $RARURL>$VARDIR/newrar.url
  16 if ! diff -q $VARDIR/newrar.url $VARDIR/rar.url > /dev/null; then
  17     echo New ICCAT file available at `cat $VARDIR/newrar.url`
  18     wget -q `cat $VARDIR/newrar.url` -O $VARDIR/$FILENAME
  19     mv $VARDIR/newrar.url $VARDIR/rar.url
  20     # grep -v "ICCAT List Number" ICCAT_VESSELS_20100528.xls | iconv -f cp1252 -t utf-8 | cut -d $'\t' -f 1 | sort > ids_20100528
  21 else
  22     rm $VARDIR/newrar.url
  23 fi
  24 rm $HTMLFILE