Added old scripts iccat & marine traffic to subversion
[ais.git] / cron / iccat.cron
1 #!/usr/bin/env bash
2 umask 002
3 sleep 26
4 set -e
5
6 #export MAILTO=contact_admin@nirgal.com,
7
8 VARDIR=/var/lib/ais/iccat
9 HTMLFILE=$VARDIR/`date -u +%Y%m%d`.html
10 wget -q http://www.iccat.int/en/vesselsrecord.asp -O $HTMLFILE
11 FILENAME=`python -m ais.extras.iccat_getrarfilename $HTMLFILE`
12 RARURL=http://www.iccat.int$FILENAME
13 FILENAME=`basename $FILENAME`
14
15 echo $RARURL>$VARDIR/newrar.url
16 if ! diff -q $VARDIR/newrar.url $VARDIR/rar.url > /dev/null; then
17     echo New ICCAT file available at `cat $VARDIR/newrar.url`
18     wget -q `cat $VARDIR/newrar.url` -O $VARDIR/$FILENAME
19     mv $VARDIR/newrar.url $VARDIR/rar.url
20     # grep -v "ICCAT List Number" ICCAT_VESSELS_20100528.xls | iconv -f cp1252 -t utf-8 | cut -d $'\t' -f 1 | sort > ids_20100528
21 else
22     rm $VARDIR/newrar.url
23 fi
24 rm $HTMLFILE