ferlib2koha.pl

   1 #!/usr/bin/perl -w
   2
   3 use strict;
   4 use DBI;
   5 use Data::Dump qw/dump/;
   6
   7 $|++;
   8
   9 my $import = {
  10         borrowers => 1,
  11         issues => 0,
  12 };
  13
  14 my $f = DBI->connect("dbi:SQLite:dbname=knjiznica.sqlite","","", { RaiseError => 1, AutoCommit => 0 }) || die $DBI::errstr;
  15 $f->{sqlite_unicode} = 1;
  16 my $k = DBI->connect("dbi:mysql:database=koha_fer","","", { RaiseError => 1, AutoCommit => 0, mysql_enable_utf8 => 1 }) || die $DBI::errstr;
  17
  18 our $lookup;
  19 sub lookup {
  20         my ( $dbh, $t, $k, $v, $s, $default ) = @_;
  21         my $hash;
  22         my $key = "$t $k $v";
  23         if ( exists $lookup->{$key} ) {
  24                 $hash = $lookup->{$key};
  25         } else {
  26                 warn "# select $k,$v from $t";
  27                 my $sth = $dbh->prepare( "select $k,$v from $t" );
  28                 $sth->execute;
  29                 while (my $row = $sth->fetchrow_hashref() ) {
  30                         $hash->{ $row->{$k} } = $row->{$v};
  31                 }
  32                 $lookup->{$key} = $hash;
  33                 warn dump($lookup);
  34         }
  35         return unless length $s > 1;
  36         if ( ! exists $lookup->{$key}->{$s} ) {
  37                 warn "ERROR: no $s in $key\n";
  38                 return $default;
  39         } else {
  40                 $lookup->{$key}->{$s};
  41         }
  42 }
  43
  44 our $insert;
  45 sub insert {
  46         my ( $table, $row ) = @_;
  47         $insert->{$table} ||= $k->prepare(
  48                         "insert into $table ("
  49                         . join(',', keys %$row)
  50                         . ") values ("
  51                         . join(',', map { '?' } keys %$row )
  52                         . ")"
  53         );
  54
  55         foreach my $c ( grep { /(date|timestamp)/ } keys %$row ) {
  56                 $row->{$c} =~ s/^(\d\d)\.(\d\d)\.(\d\d\d\d)/$3-$2-$1/;
  57         }
  58
  59         $insert->{$table}->execute( values %$row );
  60         warn "# inserted ", dump $row;
  61
  62 }
  63
  64 sub borrowers {
  65         my $sql = shift;
  66         my $sth = $f->prepare($sql);
  67         $sth->execute;
  68
  69         $insert = undef;
  70
  71         while (my $row = $sth->fetchrow_hashref ) {
  72
  73                 warn dump $row;
  74
  75                 # poor man's (sqlite) outer join
  76                 $row->{'country'} = lookup($f, 'drzava', 'ozn_drzava', 'naz_drzava', $row->{'country'}, $row->{contry} );
  77                 $row->{'city'}    = lookup($f, 'mjesto', 'post_ozn', 'naz_mjesto', $row->{'city'}, $row->{city} );
  78
  79                 $row->{'B_country'} = lookup($f, 'drzava', 'ozn_drzava', 'naz_drzava', $row->{'B_country'}, $row->{B_country} );
  80                 $row->{'B_city'}    = lookup($f, 'mjesto', 'post_ozn', 'naz_mjesto', $row->{'B_city'}, $row->{B_city} );
  81
  82                 $row->{'email'}    = lookup($f, 'clanost', 'ozn_vrclan||ozn_clan', 'email', $row->{'cardnumber'}, undef);
  83                 $row->{'emailpro'} = lookup($f, 'clanost', 'ozn_vrclan||ozn_clan', 'email_k', $row->{'cardnumber'}, undef);
  84
  85                 $row->{sex} =~ s/\x{17D}/F/;
  86
  87                 $row->{city} ||= '?'; # not null
  88
  89                 $row->{borrowernotes} = lookup($f, 'clanorg', 'ozn_vrclan||ozn_clan', 'napom_clan', $row->{'cardnumber'}, undef);
  90
  91                 $row->{title} = lookup($f, 'titula', 'ozn_titula', 'opis_titula', $row->{title}, $row->{title});
  92
  93                 my $jmbg = delete $row->{jmbg};
  94
  95                 insert 'borrowers' => $row;
  96
  97                 insert 'borrower_attributes' => {
  98                         borrowernumber => $k->{mysql_insertid},
  99                         code => 'JMBG',
 100                         attribute => $jmbg,
 101                 } if $jmbg;
 102
 103         }
 104 }
 105
 106 if ( $import->{borrowers} ) {
 107
 108 $k->do(qq{ delete from borrowers where borrowernumber > 57 });
 109 $k->do(qq{ delete from borrower_attributes where borrowernumber > 57 });
 110
 111 borrowers qq{
 112 select
 113   'S' as categorycode,
 114   'SRE' as branchcode,
 115   'S' || mbr_stud as cardnumber,
 116   prez_stud as surname,
 117   ime_stud as firstname,
 118   djevprezime as othernames,
 119   spol as sex,
 120   dat_rodj as dateofbirth,
 121 --  ime_otac as ??,
 122 --  ime_majka as ??,
 123   ozn_drzava_preb as country,
 124   post_ozn_preb as zipcode,
 125   post_ozn_preb as city,
 126   adr_preb as address,
 127   ozn_drzava_stan as B_country,
 128   post_ozn_stan as B_zipcode,
 129   post_ozn_stan as B_city,
 130   adr_stan as B_address,
 131   tel_stud as phone,
 132   dat_prava_do as dateexpiry,
 133 --  aktivan as ??,
 134   jmbg_stud as jmbg
 135 from studk
 136 };
 137
 138 borrowers qq{
 139 select
 140   'D' as categorycode,
 141   'SRE' as branchcode,
 142   'D' || sif_djel as cardnumber,
 143   ime_djel as firstname,
 144   prez_djel as surname,
 145   ozn_titula as title,
 146 --  sif_orgjed (REF orgjed) as B_address,
 147 --  sif_strsp_djel as ??,
 148   tel_djel as phonepro,
 149   dat_prekid_ro as dateexpiry,
 150 --  tel_poduz as ??,
 151   fax_poduz as fax,
 152   ozn_drzava as country,
 153   post_ozn as zipcode,
 154   post_ozn as city,
 155   adr_stan as address,
 156   tel_stan as phone,
 157   jmbg_djel as jmbg
 158 from djelat
 159 };
 160
 161 borrowers qq{
 162 select
 163   'O' as categorycode,
 164   'SRE' as branchcode,
 165   'O' || mbr_clan as cardnumber,
 166   ime_clan as firstname,
 167   prez_clan as surname,
 168   ozn_titula as title,
 169   zvanje_clan as ethnicity, -- XXX we are not allowerd by low to collect ethnicity
 170 --  krat_poduz (REF poduz) as B_address,
 171   tel_poduz as B_phone,
 172 --  fax_poduz as ??,
 173   ozn_drzava as country,
 174   post_ozn as zipcode,
 175   post_ozn as city,
 176   adr_stan as address,
 177   tel_stan as phone,
 178 --  aktivan as ??,
 179   jmbg_clan as jmbg
 180 from clost
 181 };
 182
 183 my $sth_syspref = $k->prepare(qq{ update systempreferences set value=? where variable=? });
 184 my $BorrowersTitles = join('|', @{ $k->selectcol_arrayref(qq{ select distinct title from borrowers where title != '' }) });
 185 $sth_syspref->execute( $BorrowersTitles => 'BorrowersTitles' );
 186 warn "# BorrowersTitles [$BorrowersTitles]";
 187
 188 } # import->{borrowers}
 189
 190 sub issues {
 191         my ($table,$sql) = @_;
 192         my $sth = $f->prepare($sql);
 193         $sth->execute;
 194
 195         $insert = undef;
 196
 197         while (my $row = $sth->fetchrow_hashref ) {
 198                 $row->{borrowernumber} = lookup($k, 'borrowers', 'cardnumber' => 'borrowernumber', $row->{borrowernumber});
 199                 $row->{itemnumber}     = lookup($k, 'items', 'barcode' => 'itemnumber', $row->{itemnumber});
 200                 insert $table => $row;
 201         }
 202 }
 203
 204 my $posud_sql = qq{
 205 select
 206         ozn_vrclan||ozn_clan as borrowernumber,
 207         sif_primj as itemnumber,
 208         datum_do as date_due,
 209         'SRE' as branchcode, -- FIXME
 210         datum_vra as returndate,
 211         datum_pos as issuedate,
 212         datum_pos||' '||vrijeme_pos as timestamp
 213 from posud
 214 };
 215
 216 if ( $import->{issuses} ) {
 217
 218 $k->do('delete from old_issues');
 219 $k->do('delete from issues');
 220 issues 'old_issues' => qq{$posud_sql where datum_vra != ''};
 221 issues 'issues'     => qq{$posud_sql where datum_vra == ''};
 222
 223 }; # import->{issues}
 224
 225 $k->commit;