ferlib2koha.pl

   1 #!/usr/bin/perl -w
   2
   3 use strict;
   4 use DBI;
   5 use Data::Dump qw/dump/;
   6
   7 $|++;
   8
   9 my $import = {
  10         borrowers => 1,
  11         issues => 0,
  12 };
  13
  14 my $f = DBI->connect("dbi:SQLite:dbname=knjiznica.sqlite","","", { RaiseError => 1, AutoCommit => 0 }) || die $DBI::errstr;
  15 $f->{sqlite_unicode} = 1;
  16 my $k = DBI->connect("dbi:mysql:database=koha_fer","","", { RaiseError => 1, AutoCommit => 0, mysql_enable_utf8 => 1 }) || die $DBI::errstr;
  17
  18 our $lookup;
  19 sub lookup {
  20         my ( $dbh, $t, $k, $v, $s, $default ) = @_;
  21         my $hash;
  22         my $key = "$t $k $v";
  23         if ( exists $lookup->{$key} ) {
  24                 $hash = $lookup->{$key};
  25         } else {
  26                 warn "# select $k,$v from $t";
  27                 my $sth = $dbh->prepare( "select $k,$v from $t" );
  28                 $sth->execute;
  29                 while (my $row = $sth->fetchrow_hashref() ) {
  30                         $hash->{ $row->{$k} } = $row->{$v};
  31                 }
  32                 $lookup->{$key} = $hash;
  33                 warn dump($lookup);
  34         }
  35         return unless length $s > 1;
  36         if ( ! exists $lookup->{$key}->{$s} ) {
  37                 warn "ERROR: no $s in $key\n";
  38                 return $default;
  39         } else {
  40                 $lookup->{$key}->{$s};
  41         }
  42 }
  43
  44 our $insert;
  45 sub insert {
  46         my ( $table, $row ) = @_;
  47         $insert->{$table} ||= $k->prepare(
  48                         "insert into $table ("
  49                         . join(',', keys %$row)
  50                         . ") values ("
  51                         . join(',', map { '?' } keys %$row )
  52                         . ")"
  53         );
  54
  55         foreach my $c ( grep { /(date|timestamp)/ } keys %$row ) {
  56                 $row->{$c} =~ s/^(\d\d)\.(\d\d)\.(\d\d\d\d)/$3-$2-$1/;
  57         }
  58
  59         $insert->{$table}->execute( values %$row );
  60         warn "# inserted ", dump $row;
  61
  62 }
  63
  64 sub borrowers {
  65         my $sql = shift;
  66         my $sth = $f->prepare($sql);
  67         $sth->execute;
  68
  69         $insert = undef;
  70
  71         while (my $row = $sth->fetchrow_hashref ) {
  72
  73                 warn dump $row;
  74
  75                 # poor man's (sqlite) outer join
  76                 $row->{'country'} = lookup($f, 'drzava', 'ozn_drzava', 'naz_drzava', $row->{'country'}, $row->{contry} );
  77                 $row->{'city'}    = lookup($f, 'mjesto', 'post_ozn', 'naz_mjesto', $row->{'city'}, $row->{city} );
  78
  79                 $row->{'B_country'} = lookup($f, 'drzava', 'ozn_drzava', 'naz_drzava', $row->{'B_country'}, $row->{B_country} );
  80                 $row->{'B_city'}    = lookup($f, 'mjesto', 'post_ozn', 'naz_mjesto', $row->{'B_city'}, $row->{B_city} );
  81
  82                 $row->{'email'}    = lookup($f, 'clanost', 'ozn_vrclan||ozn_clan', 'email', $row->{'cardnumber'}, undef);
  83                 $row->{'emailpro'} = lookup($f, 'clanost', 'ozn_vrclan||ozn_clan', 'email_k', $row->{'cardnumber'}, undef);
  84
  85                 $row->{sex} =~ s/\x{17D}/F/;
  86
  87                 $row->{city} ||= '?'; # not null
  88
  89                 $row->{borrowernotes} = lookup($f, 'clanorg', 'ozn_vrclan||ozn_clan', 'napom_clan', $row->{'cardnumber'}, undef);
  90
  91                 my $jmbg = delete $row->{jmbg};
  92
  93                 insert 'borrowers' => $row;
  94
  95                 insert 'borrower_attributes' => {
  96                         borrowernumber => $k->{mysql_insertid},
  97                         code => 'JMBG',
  98                         attribute => $jmbg,
  99                 } if $jmbg;
 100
 101         }
 102 }
 103
 104 if ( $import->{borrowers} ) {
 105
 106 $k->do(qq{ delete from borrowers where borrowernumber > 57 });
 107 $k->do(qq{ delete from borrower_attributes where borrowernumber > 57 });
 108
 109 borrowers qq{
 110 select
 111   'S' as categorycode,
 112   'SRE' as branchcode,
 113   'S' || mbr_stud as cardnumber,
 114   prez_stud as surname,
 115   ime_stud as firstname,
 116   djevprezime as othernames,
 117   spol as sex,
 118   dat_rodj as dateofbirth,
 119 --  ime_otac as ??,
 120 --  ime_majka as ??,
 121   ozn_drzava_preb as country,
 122   post_ozn_preb as zipcode,
 123   post_ozn_preb as city,
 124   adr_preb as address,
 125   ozn_drzava_stan as B_country,
 126   post_ozn_stan as B_zipcode,
 127   post_ozn_stan as B_city,
 128   adr_stan as B_address,
 129   tel_stud as phone,
 130   dat_prava_do as dateexpiry,
 131 --  aktivan as ??,
 132   jmbg_stud as jmbg
 133 from studk
 134 };
 135
 136 borrowers qq{
 137 select
 138   'D' as categorycode,
 139   'SRE' as branchcode,
 140   'D' || sif_djel as cardnumber,
 141   ime_djel as firstname,
 142   prez_djel as surname,
 143   ozn_titula as title, -- FIXME
 144 --  sif_orgjed (REF orgjed) as B_address,
 145 --  sif_strsp_djel as ??,
 146   tel_djel as phonepro,
 147   dat_prekid_ro as dateexpiry,
 148 --  tel_poduz as ??,
 149   fax_poduz as fax,
 150   ozn_drzava as country,
 151   post_ozn as zipcode,
 152   post_ozn as city,
 153   adr_stan as address,
 154   tel_stan as phone,
 155   jmbg_djel as jmbg
 156 from djelat
 157 };
 158
 159 borrowers qq{
 160 select
 161   'O' as categorycode,
 162   'SRE' as branchcode,
 163   'O' || mbr_clan as cardnumber,
 164   ime_clan as firstname,
 165   prez_clan as surname,
 166   ozn_titula as title, -- ?
 167   zvanje_clan as ethnicity, -- XXX we are not allowerd by low to collect ethnicity
 168 --  krat_poduz (REF poduz) as B_address,
 169   tel_poduz as B_phone,
 170 --  fax_poduz as ??,
 171   ozn_drzava as country,
 172   post_ozn as zipcode,
 173   post_ozn as city,
 174   adr_stan as address,
 175   tel_stan as phone,
 176 --  aktivan as ??,
 177   jmbg_clan as jmbg
 178 from clost
 179 };
 180
 181 } # import->{borrowers}
 182
 183 sub issues {
 184         my ($table,$sql) = @_;
 185         my $sth = $f->prepare($sql);
 186         $sth->execute;
 187
 188         $insert = undef;
 189
 190         while (my $row = $sth->fetchrow_hashref ) {
 191                 $row->{borrowernumber} = lookup($k, 'borrowers', 'cardnumber' => 'borrowernumber', $row->{borrowernumber});
 192                 $row->{itemnumber}     = lookup($k, 'items', 'barcode' => 'itemnumber', $row->{itemnumber});
 193                 insert $table => $row;
 194         }
 195 }
 196
 197 my $posud_sql = qq{
 198 select
 199         ozn_vrclan||ozn_clan as borrowernumber,
 200         sif_primj as itemnumber,
 201         datum_do as date_due,
 202         'SRE' as branchcode, -- FIXME
 203         datum_vra as returndate,
 204         datum_pos as issuedate,
 205         datum_pos||' '||vrijeme_pos as timestamp
 206 from posud
 207 };
 208
 209 if ( $import->{issuses} ) {
 210
 211 $k->do('delete from old_issues');
 212 $k->do('delete from issues');
 213 issues 'old_issues' => qq{$posud_sql where datum_vra != ''};
 214 issues 'issues'     => qq{$posud_sql where datum_vra == ''};
 215
 216 }; # import->{issues}
 217
 218 $k->commit;