single-chunk tokens being quoted is ok now. misc other fixes
[migration-tools.git] / Equinox-Migration / lib / Equinox / Migration / SubfieldMapper.pm
1 package Equinox::Migration::SubfieldMapper;
2
3 use warnings;
4 use strict;
5
6 =head1 NAME
7
8 Equinox::Migration::SubfieldMapper - Generate named-field to MARC tag map from file
9
10 =head1 VERSION
11
12 Version 1.004
13
14 =cut
15
16 our $VERSION = '1.004';
17
18
19 =head1 SYNOPSIS
20
21 Using a file as input, E::M::SM generates a mapping of MARC subfields
22 to arbitrary field names, and provides several access mechanisms to
23 that set.
24
25     use Equinox::Migration::SubfieldMapper;
26     ...
27
28
29 =head1 METHODS
30
31 =head2 new
32
33 Takes one optional argument, C<file>. If this is speficied, the tag
34 list will be populated as per that file on instantiation.
35
36 Returns a E::M::SM object.
37
38 =cut
39
40 sub new {
41     my ($class, %args) = @_;
42
43     my $self = bless { conf   => { mods => undef },
44                        fields => {},
45                        tags   => {} }, $class;
46
47     if ($args{mods}) {
48         die "Argument 'mods' is wrong type\n"
49           unless (ref $args{mods} eq "ARRAY");
50         for my $mod ( @{$args{mods}} )
51           { $self->{conf}{mods}{$mod} = 1 }
52     }
53
54     if ($args{file}) {
55         if (-r $args{file}) {
56             $self->{conf}{file} = $args{file};
57             $self->generate;
58         } else {
59             die "Can't open file: $!\n";
60         }
61     }
62
63     return $self;
64 }
65
66 =head2 has
67
68 Ask it whether your mapping has various things, and it'll let you know.
69
70     $sm->has('fieldname')      # is this fieldname mapped?
71     $sm->has(901)              # are there any mappings for this tag?
72     $sm->has(650,'c')          # is this tag/subfield combo mapped?
73     $sm->has('name', 245, 'a') # is this name mapped to 245$a?
74
75 Returns 1 if true, 0 if false.
76
77 FIXME: use named params instead of positional
78
79 =cut
80
81 sub has {
82     my ($self, @chunks) = @_;
83     return undef unless (defined $chunks[0]);
84
85     if ($chunks[0] =~ /^\d/) {
86         if (defined $chunks[1]) {
87             return 1 if ( defined $self->{tags}{$chunks[0]}{$chunks[1]} );
88             return 0;
89         } else {
90             return 1 if ( defined $self->{tags}{$chunks[0]} );
91             return 0;
92         }
93     } else {
94         if (defined $chunks[2]) {
95             return 1 if ( $self->{fields}{$chunks[0]}{tag} eq $chunks[1] and
96                           $self->{fields}{$chunks[0]}{sub} eq $chunks[2] );
97             return 0;
98         } elsif (defined $chunks[1]) {
99             return 1 if ( $self->{fields}{$chunks[0]}{tag} eq $chunks[1] );
100             return 0;
101         } else {
102             return 1 if ( defined $self->{fields}{$chunks[0]} );
103             return 0;
104         }
105     }
106 }
107
108 =head2 tags
109
110 Returns an arrayref containing the tags defined in the map.
111
112     my $tags = $sfm->tags;
113     for my tag ( @{$tags} ) {
114         my $subs = $sfm->subfields($tag);
115         ...
116     }
117
118 =cut
119
120 sub tags {
121     my ($self) = @_;
122     return [ keys %{$self->{tags}} ];
123 }
124
125 =head2 subfields
126
127 Given a tag, return an arrayref of the subfields mapped with that tag.
128
129     my $tags = $sfm->tags;
130     for my tag ( @{$tags} ) {
131         my $subs = $sfm->subfields($tag);
132         ...
133     }
134
135 Returns C<undef> if C<tag> is not mapped.
136
137 =cut
138
139 sub subfields {
140     my ($self, $tag) = @_;
141     return undef unless $self->has($tag);
142     return [ keys %{$self->{tags}{$tag}} ];
143 }
144
145
146 =head2 field
147
148 Given a tag and subfield code,
149
150     my $fname = $sm->field(945, 'p')
151
152 return the name mapped to them. Returns C<undef> if no mapping exists.
153
154 =cut
155
156 sub field {
157     my ($self, $tag, $sub) = @_;
158     return undef unless (defined $tag and defined $sub);
159     return undef unless $self->has($tag, $sub);
160     return $self->{tags}{$tag}{$sub};
161 }
162
163 =head2 mods
164
165 With no argument, returns a hashref containing all modifiers for the entire map:
166
167     {
168       modifier => {
169                     tag => [ list_of subs ],
170                     ...
171                   },
172       ...
173     }
174
175 Given a fieldname, returns a hashref of the modifiers set on that mapping.
176
177     $self->mods('fieldname')
178
179 Returns undef is nothing is defined.
180
181 =cut
182
183 sub mods {
184     my ($self, $field) = @_;
185     return $self->{allmods} unless defined $field;
186     return undef unless $self->has($field);
187     return undef unless (%{ $self->{fields}{$field}{mods} });
188     return $self->{fields}{$field}{mods};
189 }
190
191 =head2 filters
192
193 Returns the content filters set on a mapping
194
195     $self->filters('fieldname')
196
197 If there are no filters, C<undef> will be returned. Else a listref
198 will be returned.
199
200 =cut
201
202 sub filters {
203     my ($self, $field) = @_;
204     return undef unless $self->has($field);
205     return undef unless ($self->{fields}{$field}{filt});
206     return $self->{fields}{$field}{filt};
207 }
208
209 =head1 MAP CONSTRUCTION METHODS
210
211 These methods are not generally accessed from user code.
212
213 =head2 generate
214
215 Generate initial mapping from file.
216
217 =cut
218
219 sub generate {
220     my ($self, $file) = @_;
221
222     open TAGFILE, '<', $self->{conf}{file};
223     while (<TAGFILE>) {
224         next if m/^#/;
225         next if m/^\s*\n$/;
226
227         chomp;
228         my @tokens = split /\s+/;
229
230         my $map = { mods => [], filt => [] };
231         $map->{field} = shift @tokens;
232         $map->{tag}   = shift @tokens;
233         while (my $tok = shift @tokens) {
234             last if ($tok =~ m/^#/);
235             if ($tok =~ m/^[a-z]:'/ and $tok !~ /'$/) {
236                 $tok .= ' ' . shift @tokens
237                   until ($tokens[0] =~ m/'$/);
238                 $tok .= ' ' . shift @tokens;
239                 $tok =~ s/^'//;
240                 $tok =~ s/'$//;
241             }
242             if ($tok =~ m/^m:/)
243               { push @{$map->{mods}}, $tok }
244             elsif ($tok =~ m/^f:/)
245               { push @{$map->{filt}}, $tok }
246             elsif ($tok =~ m/^[a-z0-9]$/)
247               { $map->{sub} = $tok }
248             else
249               { die "Unknown chunk '$tok' at line $.\n" }
250         }
251         $self->add($map);
252     }
253 }
254
255 =head2 add
256
257 Add new item to mapping. Not usually called directly from user code.
258
259     $sm->add( $map );
260
261 Where C<$map> is a hashref that, at a minimum, looks like
262
263     { field => "value", tag => NNN, sub => X }
264
265 and may also have the key/value pairs
266
267     mods => [ ITEMS ]
268     filt => [ ITEMS ]
269
270 =cut
271
272 sub add {
273     my ($self, $map) = @_;
274
275     # trim the mods and filters
276     my $mods = {};
277     my $filt = []; my %filt = ();
278     for my $m (@{$map->{mods}}) {
279         die "Modifier collision '$m' at line $." if $mods->{$m};
280         $m =~ s/^m://;
281         $mods->{$m} = 1;
282         push @{$self->{allmods}{$m}{ $map->{tag} }}, $map->{sub};
283     }
284     for my $f (@{$map->{filt}}) {
285         die "Filter collision '$f' at line $." if $filt{$f};
286         $f =~ s/^f://;
287         push @{$filt}, $f; $filt{$f} = 1;
288     }
289     $map->{mods} = $mods;
290     $map->{filt} = $filt;
291
292     # check bits for validity
293     $self->validate($map);
294
295     # add data to the fields hash
296     $self->{fields}{ $map->{field} } = { tag => $map->{tag},
297                                          sub => $map->{sub},
298                                          mods => $map->{mods},
299                                          filt => $map->{filt}
300                                        };
301     # and to the tags hash
302     $self->{tags}{ $map->{tag} }{ $map->{sub} } = $map->{field};
303 }
304
305 =head2 validate
306
307 Passed a reference to the hash given to C<add>, validate scans its
308 contents for common errors and dies if there is an issue.
309
310     * field, tag, and sub are required
311     * fieldnames must start with a letter
312     * fieldnames must be unique
313     * tag must be between 0 and 999
314     * subfield code must be a single alphanumeric character
315     * tag+subfield can only be mapped once
316     * if a list of allowable mod values was given in the call to
317       C<new>, any modifiers must be on that list
318
319 =cut
320
321 sub validate {
322     my ($self, $map) = @_;
323
324     $.= 1 unless defined $.;
325
326     die "Required field missing (line $.)\n"
327       unless (defined $map->{field} and defined $map->{tag} and defined $map->{sub});
328
329     die "Fieldnames must start with letter (line $.)\n"
330      unless ($map->{field} =~ /^[a-zA-z]/);
331
332     die "Invalid tag (line $.)\n"
333       if ($map->{tag} =~ /[^\d\-]/ or $map->{tag} < 0 or $map->{tag} > 999);
334
335     die "Invalid subfield code (line $.)\n"
336       if (length $map->{sub} != 1 or $map->{sub} =~ /[^a-zA-Z0-9]/);
337
338     # test mod names if we have a set to check against
339     if (defined $self->{conf}{mods}) {
340         for my $mod ( keys %{$map->{mods}} ) {
341             die "Modifier '$mod' not allowed\n"
342               unless $self->{conf}{mods}{$mod};
343         }
344     }
345
346     die "Fieldnames must be unique (line $.)\n"
347       if (defined $self->{fields}{$map->{field}});
348
349     die "Subfields cannot be mapped twice (line $.)\n"
350       if (defined $self->{tags}{$map->{tag}}{$map->{sub}});
351
352 }
353
354
355 =head1 AUTHOR
356
357 Shawn Boyette, C<< <sboyette at esilibrary.com> >>
358
359 =head1 BUGS
360
361 Please report any bugs or feature requests to the above email address.
362
363 =head1 SUPPORT
364
365 You can find documentation for this module with the perldoc command.
366
367     perldoc Equinox::Migration::SubfieldMapper
368
369
370 =head1 COPYRIGHT & LICENSE
371
372 Copyright 2009 Equinox, all rights reserved.
373
374 This program is free software; you can redistribute it and/or modify it
375 under the same terms as Perl itself.
376
377
378 =cut
379
380 1; # End of Equinox::Migration::SimpleTagList