b0ca3c864c3fe61f7bc375657d59dff555381d67
[migration-tools.git] / unicorn_patron_xml2text.pl
1 #!/usr/bin/perl
2 use strict;
3 use warnings;
4
5 use DateTime;
6 use Time::HiRes qw/time/;
7 use XML::LibXML;
8
9 my %s_map;
10
11 my $doc = XML::LibXML->new->parse_file($ARGV[0]);
12
13 my $starttime = time;
14 my $count = 1;
15
16 my @base_elements = (
17     "user_id",
18     "user_altid",
19     "user_pin",
20     "user_profile",
21     "user_status",
22     "user_priv_granted",
23     "user_priv_expires",
24     "user_mailingaddr",
25     "birthdate",
26     "last_name",
27     "first_name",
28     "middle_name",
29     "suffix_name",
30     "note",
31     "comment",
32     "staff",
33     "webcatpref",
34     "user_category1",
35     "user_category2",
36     "user_category3",
37     "dept",
38     "guardian",
39     "user_claims_ret",
40     #"user_environment",
41     #"user_library",
42     "user_department"
43 );
44
45 my @addr_elements = (
46     "std_line1",
47     "std_line2",
48     "std_city",
49     "std_state",
50     "std_zip",
51     "phone",
52     "dayphone",
53     "homephone",
54     "workphone",
55     "email",
56     "location",
57     "usefor",
58     "care_of"
59 );
60
61 print STDOUT join("\t", @base_elements);
62 foreach my $addr ( 1..3 ) {
63     print STDOUT "\t" . join("\t", @addr_elements);
64 }
65 print STDOUT "\n";
66
67 for my $patron ( $doc->documentElement->childNodes ) {
68         next if ($patron->nodeType == 3);
69
70         my $bc = $patron->findvalue( 'user_id' );
71         if (exists($s_map{$bc})) {
72                 $count++;
73                 warn "\n!!! already saw barcode $bc, skipping\n";
74                 next;
75         } else {
76                 $s_map{$bc} = 1;
77         }
78
79         unless (defined($bc)) {
80                 my $xml = $patron->toString;
81                 warn "\n!!! no barcode found in UMS data, user number $count, xml => $xml \n";
82                 $count++;
83                 next;
84         }
85
86     foreach my $e ( @base_elements ) {
87         my $v = $patron->findvalue( $e );
88         if ( $v && ( $e eq 'birthdate' || $e eq 'user_priv_granted' || $e eq 'user_priv_expires' ) ) { $v = parse_date($v); }
89         print STDOUT ( $v ? $v : '' ) . "\t";
90     }
91
92         my %addresses;
93
94         for my $addr ( $patron->findnodes( "Address" ) ) {
95                 my $addr_type = $addr->getAttribute('addr_type');
96                 $addresses{$addr_type} = $addr;
97         }
98
99     foreach my $t ( 1..3 ) {
100         if ($addresses{$t}) {
101             foreach my $e ( @addr_elements ) {
102                 my $v = $addresses{$t}->findvalue( $e );
103                 print STDOUT ( $v ? $v : '' ) . "\t";
104             }
105         } else {
106             foreach ( @addr_elements ) { print STDOUT "\t"; }
107         }
108     }
109
110     print STDOUT "\n";
111         $count++;
112 }
113
114 sub parse_date {
115         my $string = shift;
116         my $group = shift;
117
118         my ($y,$m,$d);
119
120         if ($string eq 'NEVER') {
121                 my (undef,undef,undef,$d,$m,$y) = localtime();
122                 return sprintf('%04d-%02d-%02d', $y + 1920, $m + 1, $d);
123         } elsif (length($string) == 8 && $string =~ /^(\d{4})(\d{2})(\d{2})$/o) {
124                 ($y,$m,$d) = ($1,$2,$3);
125         } elsif ($string =~ /(\d+)\D(\d+)\D(\d+)/o) { #looks like it's parsable
126                 if ( length($3) > 2 )  { # looks like mm.dd.yyyy
127                         if ( $1 < 99 && $2 < 99 && $1 > 0 && $2 > 0 && $3 > 0) {
128                                 if ($1 > 12 && $1 < 31 && $2 < 13) { # well, actually it looks like dd.mm.yyyy
129                                         ($y,$m,$d) = ($3,$2,$1);
130                                 } elsif ($2 > 12 && $2 < 31 && $1 < 13) {
131                                         ($y,$m,$d) = ($3,$1,$2);
132                                 }
133                         }
134                 } elsif ( length($1) > 3 ) { # format probably yyyy.mm.dd
135                         if ( $3 < 99 && $2 < 99 && $1 > 0 && $2 > 0 && $3 > 0) {
136                                 if ($2 > 12 && $2 < 32 && $3 < 13) { # well, actually it looks like yyyy.dd.mm -- why, I don't konw
137                                         ($y,$m,$d) = ($1,$3,$2);
138                                 } elsif ($3 > 12 && $3 < 31 && $2 < 13) {
139                                         ($y,$m,$d) = ($1,$2,$3);
140                                 }
141                         }
142                 } elsif ( $1 < 99 && $2 < 99 && $3 < 99 && $1 > 0 && $2 > 0 && $3 > 0) {
143                         if ($3 < 7) { # probably 2000 or greater, mm.dd.yy
144                                 $y = $3 + 2000;
145                                 if ($1 > 12 && $1 < 32 && $2 < 13) { # well, actually it looks like dd.mm.yyyy
146                                         ($m,$d) = ($2,$1);
147                                 } elsif ($2 > 12 && $2 < 32 && $1 < 13) {
148                                         ($m,$d) = ($1,$2);
149                                 }
150                         } else { # probably before 2000, mm.dd.yy
151                                 $y = $3 + 1900;
152                                 if ($1 > 12 && $1 < 32 && $2 < 13) { # well, actually it looks like dd.mm.yyyy
153                                         ($m,$d) = ($2,$1);
154                                 } elsif ($2 > 12 && $2 < 32 && $1 < 13) {
155                                         ($m,$d) = ($1,$2);
156                                 }
157                         }
158                 }
159         }
160
161         my $date = $string;
162         if ($y && $m && $d) {
163                 eval {
164                         $date = sprintf('%04d-%02d-%-2d',$y, $m, $d)
165                                 if (new DateTime ( year => $y, month => $m, day => $d ));
166                 }
167         }
168
169         return $date;
170 }
171