Fix grep fail.
[sitka/sitka-tools.git] / marc_export_custom / sitka-full-export-parallel-outlook-wrapper.sh
1 #!/bin/bash
2 # This is meant to be fire-and-forget
3 # Only use it if you trust the output!
4 export DIR=$(readlink -f $(dirname $0))
5 if [ -z "${MAKEOPTS}" ]; then
6         echo "MAKEOPTS env variable is not set"
7         echo "If you really want this to be serialized, export MAKEOPTS=-j1"
8         echo "Otherwise set it about 1.5x your number of CPUs!"
9         exit 1
10 fi
11 [ -z "${T}" ] && export T=$(date -u +%Y%m%dT%H%M%SZ)
12 [ -z "${OUTDIR}" ] && export OUTDIR=$(mktemp --tmpdir -d outlook_export.$T.XXXXXXX)
13 cd $OUTDIR
14 $DIR/fetch-shortcodes.sh
15 cd $DIR
16 export PERLOPT=-X
17 time ./sitka-full-export-parallel.sh
18 rc=$?
19 cd $OUTDIR
20 mkdir split
21 mv *split* split/
22 pbzip2 -9nvk -p4 *{marc,log}
23 pbzip2 -9nv -p4 split/*{marc,log}
24 $DIR/stats.sh
25 # Look for zeros in the output marc
26 egrep -vsq '^([[:space:]]*0){2}.*marc$' *stats
27 grep_result=$?
28 # halt if found
29 if [ $rc -ne 0 -o $grep_result -ne 0 ]; then
30         echo "Failed to run export! Human needed! export=$rc grep_sanity=$grep_result" 1>&2
31         cat *stats 1>&2
32         exit 1
33 fi
34 cp $DIR/email-template-outlook.sh $OUTDIR/
35 cat >lftp.cmd <<EOF
36 open ftp://ftpbcuc:bcv15c@ftp.auto-graphics.com/
37 mkdir -p sitka/$T
38 cd sitka/$T
39 mput *csv *stats
40 mput *bz2
41 rels -l
42 EOF
43 lftp -f lftp.cmd
44 chmod +x email-template-outlook.sh
45 ./email-template-outlook.sh "$T" "@$(date +%s)" >email.txt
46 /usr/lib/sendmail -f rjohnson@sitka.bclibraries.ca <email.txt