19af3df067127db5bc4c3f18d1c0c6c7b79d50bd
[webpac2] / t / 2-input.t
1 #!/usr/bin/perl -w
2
3 use Test::More tests => 118;
4 use Test::Exception;
5 use Cwd qw/abs_path/;
6 use blib;
7 use strict;
8
9 use Data::Dump qw/dump/;
10
11 BEGIN {
12 use_ok( 'WebPAC::Input::ISIS' );
13 use_ok( 'WebPAC::Input::MARC' );
14 use_ok( 'WebPAC::Input::Test' );
15 }
16
17 my $debug = shift @ARGV;
18 my $no_log = $debug ? 0 : 1;
19
20 ok(my $abs_path = abs_path($0), "abs_path");
21 $abs_path =~ s#/[^/]*$#/#;
22
23 my $module = 'WebPAC::Input::ISIS';
24 diag "testing with $module";
25
26 throws_ok { my $input = new WebPAC::Input( ) } qr/module/, "need module";
27 ok(my $input = new WebPAC::Input( module => $module, no_log => $no_log, no_progress_bar => 1, stats => 1 ), "new $module");
28 ok(my $input_lm = new WebPAC::Input( module => $module, no_log => $no_log, no_progress_bar => 1 ), "new $module");
29
30 throws_ok { $input->open( ) } qr/path/, "need path";
31
32 throws_ok { $input->open( path => '/dev/null', ) } qr/can't find database/ , "open";
33
34 my $store;
35
36 ok($input->open( path => "$abs_path/winisis/BIBL" ), "open winisis");
37 ok($input_lm->open(
38         path => "$abs_path/winisis/BIBL",
39         save_row => sub {
40                 my $a = shift;
41                 $store->{ $a->{id} } = $a->{row};
42         },
43         load_row => sub {
44                 my $a = shift;
45                 return defined($store->{ $a->{id} }) &&
46                         $store->{ $a->{id} };
47         },
48 ), "open winisis");
49
50 cmp_ok( keys %$store, '==', 5, 'have 5 rows');
51
52 foreach my $i ( 1 .. 5 ) {
53         ok(my $r = $store->{$i}, "row $i");
54         ok($r->{'000'}, "have 000");
55         isa_ok($r->{'000'}, 'ARRAY', "is ARRAY");
56         cmp_ok($r->{'000'}->[0], '==', $i, 'sane value');
57 }
58
59 diag "store = ",dump( $store ) if ($debug);
60
61 sub test_after_open($) {
62         my $input = shift;
63
64         cmp_ok($input->pos, '==', -1, "mfn");
65         ok(my $size = $input->size, "size");
66         return $size;
67 }
68
69 test_after_open($input);
70 my $size = test_after_open($input_lm);
71
72 sub test_fetch($$) {
73         my ($input, $size) = @_;
74
75         my @db;
76
77         foreach my $mfn ( 1 ... $size ) {
78                 ok(my $rec = $input->fetch, "fetch $mfn");
79                 cmp_ok($input->pos, '==', $mfn, "pos $mfn");
80                 push @db, $rec;
81                 ok(my $dump = $input->dump_ascii, "dump_ascii $mfn");
82                 diag $dump if ($debug);
83         }
84
85         return @db;
86 }
87
88 my @db1 = test_fetch($input, $size);
89 my @db2 = test_fetch($input_lm, $size);
90
91 is_deeply(\@db1, \@db2, "seek working");
92
93 sub test_start_limit($$$$) {
94         my ($input, $s,$l,$e) = @_;
95
96         diag "offset $s, limit: $l, expected: $e";
97
98         ok($s = $input->open( path => "$abs_path/winisis/BIBL", offset => $s, limit => $l, debug => $debug ), "open winisis");
99         cmp_ok($s, '==', $size, "db size from open = $size");
100         cmp_ok($input->size, '==', $e, "input->size = $e");
101 }
102
103 test_start_limit($input, 1, 3, 3);
104 test_start_limit($input, $size, 3, 0);
105 test_start_limit($input, 3, $size, $size - 2);
106 test_start_limit($input, 1, $size + 2, $size);
107
108 ok(my $s = $input->stats, 'stats');
109 diag "stats:\n$s" if ($debug);
110
111 $module = 'WebPAC::Input::MARC';
112 diag "testing with $module";
113
114 ok($input = new WebPAC::Input( module => $module, no_log => $no_log, no_progress_bar => 1 ), "new $module");
115
116 ok($input->open( path => "$abs_path/data/marc.iso" ), "open marc.iso");
117
118 test_after_open($input);
119
120 test_fetch($input, $input->size);
121
122 # test modify_record
123 $module = 'WebPAC::Input::Test';
124 ok($input = new WebPAC::Input( module => $module, no_log => $no_log, no_progress_bar => 1, debug => $debug ), "new $module");
125
126 $WebPAC::Input::Test::rec = {
127         '200' => [
128                 { 'a' => '[200 a]', 'b' => '[200 b]', 'c' => '[200 c]', 'f' => '[200 f] test : test' },
129         ],
130         '900' => [
131                 { 'x' => 'foobar', },
132         ],
133 };
134
135 $WebPAC::Input::Test::size = 42;
136
137 ok($input->open( path => "/fake/path", ), "open modify_isis (plain)");
138
139 cmp_ok($input->size, '==', 42, 'size');
140
141 ok(my $rec_p = $input->fetch, 'fetch');
142
143 # modify_records
144
145 ok($input->open(
146         path => "/another/fake/path",
147         modify_records => {
148                 200 => {
149                         '*' => { '^c' => '. ' },
150                         '^f' => { ' : ' => ' / ' },
151                 }
152         },
153 ), "open (with modify_records)");
154
155 # seek
156 throws_ok { $input->seek } qr/without/, 'seek without position';
157 cmp_ok($input->seek(0), '==', -1, 'seek');
158
159 sub test_filter {
160
161         my $f = $WebPAC::Input::Test::filter_coderef;
162         ok(ref($f) eq 'CODE', 'filter_coderef');
163
164         my ($field, $from, $to) = @_;
165         cmp_ok( $f->( $from, $field, 1 ), 'eq', $to, "filter $field |$from| -> |$to|" );
166 }
167
168 test_filter(200,
169         '^afoo^cbar^fbing : bong',
170         '^afoo. bar^fbing / bong',
171 );
172
173 # modify_file
174
175 my $modify_file = "$abs_path/conf/modify/test.pl";
176
177 ok($input->open(
178         path => "/and/another/fake/path",
179         modify_file => $modify_file,
180 ), "open (with modify_file $modify_file)");
181
182 diag "regexps = ", dump($input->modify_file_regexps( $modify_file )) if ($debug);
183
184 test_filter(200,
185         '^a foo ; bar = baz : zzz',
186         '^a foo^kbar^dbaz : zzz',
187 );
188
189 # empty subfield removal
190
191 ok($input->open(
192         path => "/another/fake/path",
193         modify_records => {
194                 900 => {
195                         '^a' => { '^e' => ' : ^e' },
196                 },
197                 901 => {
198                         '^a' => { 'foo' => 'baz' },
199                 },
200         },
201 ), "open (with modify_records for empty subfields)");
202
203 test_filter(900,
204         '^a^ebar',
205         '^a^ebar',
206 );
207
208 test_filter(900,
209         '^afoo^ebar',
210         '^afoo : ^ebar',
211 );
212
213 test_filter(901,
214         '^afoo^ebar',
215         '^abaz^ebar',
216 );