[RT17143] Fixed pubdate scrub and authtoken error

The pubdate should not be exactly 4 digits form 260 or 264 $c.  If it is
not then it is set to 0011, so the record can be easily identified.

Signed-off-by: Liam Whalen <liam.whalen@bc.libraries.coop>

[RT17143] Added bogus date values for bad data

If the MARC has bad data even after filtering by regex, we now use two
different intentionally bad dates to help us locate this bad data after
the update.  In this case we use 000123 for 008/00-05 and 0011 for
008/07-10.  It is possible that our SQL that returns bade date1 values
returns a value with a valid 260 $c but an invalid $264 $c.  In this
case, the code will use the invalid $264 $c.  However, the checks
required to filter out this invalid $264 $c is too complex, so we add
sanity checks after our new dates are created to ensure they are the
correct length, and we use the bogus dates if they are not.  In the case
of bad 008/00-05 there might be a biblio.record_entry item with a bad
create_date, so we use 000123 to identify that.

Signed-off-by: Liam Whalen <liam.whalen@bc.libraries.coop>

[RT17143] Tighted up regex

The regex used to find bad date1 valus in the 008 needed to be more
specific.[RT17143] Tighted up regex

Signed-off-by: Liam Whalen <liam.whalen@bc.libraries.coop>

[RT17143] Restriced selection of fixable MARC records

The code was selecting MARC records with a 260 or 264 $c that had 1 to 4
characters.  However, we only want 4 character dates.  On the off chance
that a record with a 3 year date has a bad 008 date1, we can update that
record manually.

Signed-off-by: Liam Whalen <liam.whalen@bc.libraries.coop>

[RT17143] Fixed create_date parsing

The value used to fill 008/00-05 is taken from bre.create_date.
However, the code parsing the bre.create_date was selecting a four digit
year when it should have been selecting a two digit year.  This is now
corrected.

Signed-off-by: Liam Whalen <liam.whalen@bc.libraries.coop>

[RT17143] Added 008 date entered and date type cleanup

The 00-05 and 06 fields of 008 needed to be populated when empty.

[RT17143] Editing of date1 complete

The date1 value of 008 is now being replace by 264 $c or 260 $c if there
is no $264 $c available.

[RT17143] Retrieving relevant record ids

This code now retrieves record ids of records with bad date1 values and
proper 260 $c or 264 $c that can replace them.  Next up, retrieve MARC
via OpenSRF, edit it via MARC::Record and save the updated MARC record
via OpenSRF.

[RT17143] Syntax errors fixed

[RT17143] First go at date1 cleanup settings

This commit adds the ability to check the database for connectivity.
This will allow us to query the database for records with bad date1
values.  Once we have those record ids, we will be able use the Perl
EG code to update the MARC with new date1 values.

deployfile.sh: be smarter about file ownership etc when deploying with rsync

install-eg.sh: install custom dojo build from upstream

EG install scripts: nonprod-28 -> nonprod

install-eg.sh: install mobile PAC

Signed-off-by: Jeff Davis <jdavis@sitka.bclibraries.ca>

Revert "Added file to create ejabberd passwords"

This reverts commit b0770c73c404c4d449bda3d6dd31c418a20632d3.

Added file to create ejabberd passwords

When updating a server with ejabberd already installed, but the other
components of evergreen are not installed, the scripts that install
OpenSRF expect the ejabberd passwords to be set as shell variables.
This fill can be sourced to add those passwords to the shell executing
the OpenSRF install vi install-osrf.sh

Signed-off-by: Liam Whalen <liam.whalen@bc.libraries.coop>

Silence websockets install echo

The script echoes that web sockets are installed, but the code that does
so is commented out.  So, I have commented out the echo indicating that
websockets is installed.

Missing one dir arg.

Signed-off-by: Robin H. Johnson <rjohnson@sitka.bclibraries.ca>

Refactor export scripts and take my email address off them.

Signed-off-by: Robin H. Johnson <rjohnson@sitka.bclibraries.ca>

install-eg.sh: specify PATH on configure

some paper overdues require unifont pkg

install-eg.sh: oils_header.pl is required by generate_circ_notices.pl

correct hostname for BibC server

Modified list of production servers to 2.8 EG version

EG install scripts: production branches

install-eg.sh: support scripts setup: EDI, generate_circ_notices.pl

install-eg.sh: loop through skin dirs; create skin dir if it does not exist

install-eg.sh: skin folders should be sitkastaff-owned for now to facilitate deployment

install-eg.sh: tweaks to deletepatron, skin folders, etc

install-eg.sh: use correct name for config repo

install-eg.sh: deploy compiled JS for overdrive-eg-opac

overdrive-eg-opac: initial commit of compiled JS

install-eg.sh: do not set up local log rotation on prod

install-eg.sh: allow variance in production vs non-production installs

install-eg.sh: use final upgrade branch

x

install-osrf.sh: more tweaks

install-osrf.sh: ensure EG bin path is in $PATH for default user

EG install scripts: typo fix

EG install scripts: more tweaks

EG install scripts: drop -l argument from su to preserve environment (for ssh agent forwarding)

install-osrf.sh: be smarter about adding opensrf bin directory to path

EG install scripts: specify git branch for sysadmin.git

install-osrf.sh: do not install web client stuff by default

install-eg.sh: Use latest upgrade branch; specify EG version; do not install web client stuff by default

Signed-off-by: Jeff Davis <jdavis@sitka.bclibraries.ca>

install-eg.sh: offline blocked patron list

Merge branch 'master' into eg28

wrapper script for generating offline blocked patron list

Signed-off-by: Jeff Davis <jdavis@sitka.bclibraries.ca>

fix 404 and 500 errors with XUL locale stuff

install-eg.sh: we are installing 2.8.1, so stamp IDs etc should reflect that

install-eg.sh: update to latest EG upgrade branch

Update EBSCO export per email from jcarmody@EBSCO.COM, must turn off compression.

Signed-off-by: Robin H. Johnson <rjohnson@sitka.bclibraries.ca>

Add jessica to ebsco output.

Only delete if DELETE != 0.

Signed-off-by: Robin H. Johnson <rjohnson@sitka.bclibraries.ca>

deployfile.sh: update Perl version for EG2.8/Ubuntu Trusty

pathmap.ini: use correct Perl version

With EG 2.8 on Ubuntu Trusty, we use Perl 5.18.2, so the path for
OpenSRF and OpenILS Perl modules has changed.

Signed-off-by: Jeff Davis <jdavis@sitka.bclibraries.ca>

install-osrf.sh: need placeholder apache2.conf before installing prereqs

install-eg.sh: tweaks for Sitka-customized EG2.8 install

install-eg.sh: updates for EG2.8
    - do not specify dbd libs or install will fail
    - correct name of Apache 2.4 default site

Signed-off-by: Jeff Davis <jdavis@sitka.bclibraries.ca>

install-eg.sh: update for Evergreen 2.8 beta

install-osrf.sh: update for OpenSRF 2.4/Evergreen 2.8

install-eg.sh and install-osrf.sh: use correct base name for config files

deployfile.sh: update list of prod hosts (add utility0, remove stanns)

install-eg.sh: install production branch

install-eg.sh: add Python Reportlab packages for paper notices

age-circs.sql: ensure sitka.aged_circs is populated with xact_finish

age-circs.sql: fix a few bugs found during testing

Added Encode decode_utf8 use statement

Fixed syntax error

Updated produciton servers

Changed app1-1, app1-2, etc to app4, app5, and app6

age-circs.sql: a script to age circs/anonymize patron circ history

Signed-off-by: Jeff Davis <jdavis@sitka.bclibraries.ca>

update cotr marc export ini and runscript files

Implement control over which 852 4b value is used for BCREK/COTR export as needed by MLB

Signed-off-by: Robin H. Johnson <rjohnson@sitka.bclibraries.ca>

use marc_export_custom in cotr runscript

Merge branch 'master' of git+ssh://git.sitka.bclibraries.ca/sitka/sitka-tools

use db1.sitka.bclibraries.ca in cotr runscript

Apply patch from c6520c9179834915910d8c294b3078b3f5114e17:marc_export_custom to marc_export_custom_ms.

Signed-off-by: Robin H. Johnson <rjohnson@sitka.bclibraries.ca>

Apply patch from 0cb635749fd8aca004879850b2b9f456e9921b91:marc_export_custom to marc_export_custom_ms.

Signed-off-by: Robin H. Johnson <rjohnson@sitka.bclibraries.ca>

Apply patch dd134fdd181664e285e935371c92e03c9a2c065b from marc_export_custom to marc_export_custom_ms.

add marc export scripts for cotr

Postfix sendmail binary needs an extra option.

Signed-off-by: Robin H. Johnson <rjohnson@sitka.bclibraries.ca>

Fix syntax.

Signed-off-by: Robin H. Johnson <rjohnson@sitka.bclibraries.ca>

More PerlOPT.

Signed-off-by: Robin H. Johnson <rjohnson@sitka.bclibraries.ca>

Document scripts better, and squelch output.

Signed-off-by: Robin H. Johnson <rjohnson@sitka.bclibraries.ca>

Fix grep fail.

Signed-off-by: Robin H. Johnson <rjohnson@sitka.bclibraries.ca>

Make it possible to get a quiet perl.

Signed-off-by: Robin H. Johnson <rjohnson@sitka.bclibraries.ca>

integrity-checker.pl: strip newline from hash-file input

integrity-checker.pl: fix command-line options for printing git hashes

Fetch from the REMOTE

Currently, you need to manually keep your git repo fetched before any
changes exist to be deployed.

This commit adds a git fetch to pull any changes before deploying.
Signed-off-by: Liam Whalen <liam.whalen@bc.libraries.coop>

Create relative paths for local file storage

Currently, when deploying, the local files used to deploy to the server
are stored in the same directory.  When there are files that have the
same name, the last file to be deployed is the only one present in the
directory because it overwrites the previous files with the same name.

This commit creates a temporary directory with the relative path of the
filename appended to the end of the temporary directory.

Signed-off-by: Liam Whalen <liam.whalen@bc.libraries.coop>

Merge branch 'eg26'

RT21793: BTR outlook profile - exclude On Order records

install-drone.sh: it is important to correctly copy the specially built Perl libs to their proper home

install-drone.sh: update for EG2.6

Deploy latest EG branch (upgrade/eg26/rc1-tpac)

install-eg.sh: hack to use already-localized fm_IDL.xml (see RT19953)

install-eg.sh: install Sitka's version of 2.6.1 from git

Revert "update install-eg.sh to install EG 2.6 beta1 from tarball"

This reverts commit 6f940e4f50cb3d1b4420cc28d7ae5838f0404691.

install-eg.sh: fix incorrect test for whether files exist

Drop BKCT in config