removing ldap systempref, it's now in C4/Auth_with_ldap.pm separate package
[koha.git] / updater / updatedatabase
1 #!/usr/bin/perl
2
3 # $Id$
4
5 # Database Updater
6 # This script checks for required updates to the database.
7
8 # Part of the Koha Library Software www.koha.org
9 # Licensed under the GPL.
10
11 # Bugs/ToDo:
12 # - Would also be a good idea to offer to do a backup at this time...
13
14 # NOTE:  If you do something more than once in here, make it table driven.
15
16 use strict;
17
18 # CPAN modules
19 use DBI;
20 use Getopt::Long;
21 # Koha modules
22 use C4::Context;
23
24 # FIXME - The user might be installing a new database, so can't rely
25 # on /etc/koha.conf anyway.
26
27 my $debug = 0;
28
29 my (
30     $sth, $sti,
31     $query,
32     %existingtables,    # tables already in database
33     %types,
34     $table,
35     $column,
36     $type, $null, $key, $default, $extra,
37     $prefitem,          # preference item in systempreferences table
38 );
39
40 my $silent;
41 GetOptions(
42         's' =>\$silent
43         );
44 my $dbh = C4::Context->dbh;
45 print "connected to your DB. Checking & modifying it\n" unless $silent;
46
47 #-------------------
48 # Defines
49
50 # Tables to add if they don't exist
51 my %requiretables = (
52     shelfcontents => "( shelfnumber int not null,
53                                                         itemnumber int not null,
54                                                         flags int)",
55     bookshelf => "( shelfnumber int auto_increment primary key,
56                                                 shelfname char(255))",
57     z3950queue => "( id int auto_increment primary key,
58                                                 term text,
59                                                 type char(10),
60                                                 startdate int,
61                                                 enddate int,
62                                                 done smallint,
63                                                 results longblob,
64                                                 numrecords int,
65                                                 servers text,
66                                                 identifier char(30))",
67     z3950results => "( id int auto_increment primary key,
68                                                 queryid int,
69                                                 server char(255),
70                                                 startdate int,
71                                                 enddate int,
72                                                 results longblob,
73                                                 numrecords int,
74                                                 numdownloaded int,
75                                                 highestseen int,
76                                                 active smallint)",
77     branchrelations => "( branchcode varchar(4),
78                                                         categorycode varchar(4))",
79     websites => "( websitenumber int(11) NOT NULL auto_increment,
80                                                 biblionumber int(11) NOT NULL default '0',
81                                                 title text,
82                                                 description text,
83                                                 url varchar(255),
84                                                 PRIMARY KEY (websitenumber) )",
85     marcrecorddone => "( isbn char(40),
86                                                                 issn char(40),
87                                                                 lccn char(40),
88                                                                 controlnumber char(40))",
89     uploadedmarc => "( id int(11) NOT NULL auto_increment PRIMARY KEY,
90                                                         marc longblob,
91                                                         hidden smallint(6) default NULL,
92                                                         name varchar(255) default NULL)",
93     ethnicity => "( code varchar(10) NOT NULL default '',
94                                         name varchar(255) default NULL,
95                                         PRIMARY KEY  (code)   )",
96     sessions => "( sessionID varchar(255) NOT NULL default '',
97                                                 userid varchar(255) default NULL,
98                                                 ip varchar(16) default NULL,
99                                                 lasttime int,
100                                                 PRIMARY KEY (sessionID)   )",
101     sessionqueries => "( sessionID varchar(255) NOT NULL default '',
102                                                                 userid char(100) NOT NULL default '',
103                                                                 ip char(18) NOT NULL default '',
104                                                                 url text NOT NULL default ''  )",
105     bibliothesaurus => "( id bigint(20) NOT NULL auto_increment,
106                                                         freelib char(255) NOT NULL default '',
107                                                         stdlib char(255) NOT NULL default '',
108                                                         category char(10) NOT NULL default '',
109                                                         level tinyint(4) NOT NULL default '1',
110                                                         hierarchy char(80) NOT NULL default '',
111                                                         father char(80) NOT NULL default '',
112                                                         PRIMARY KEY  (id),
113                                                         KEY freelib (freelib),
114                                                         KEY stdlib (stdlib),
115                                                         KEY category (category),
116                                                         KEY hierarchy (hierarchy)
117                                                         )",
118     marc_biblio => "(
119                                                 bibid bigint(20) unsigned NOT NULL auto_increment,
120                                                 biblionumber int(11) NOT NULL default '0',
121                                                 datecreated date NOT NULL default '0000-00-00',
122                                                 datemodified date default NULL,
123                                                 origincode char(20) default NULL,
124                                                 PRIMARY KEY  (bibid),
125                                                 KEY origincode (origincode),
126                                                 KEY biblionumber (biblionumber)
127                                                 ) ",
128     marc_blob_subfield => "(
129                                         blobidlink bigint(20) NOT NULL auto_increment,
130                                         subfieldvalue longtext NOT NULL,
131                                         PRIMARY KEY  (blobidlink)
132                                         ) ",
133     marc_subfield_structure => "(
134                                                 tagfield char(3) NOT NULL default '',
135                                                 tagsubfield char(1) NOT NULL default '',
136                                                 liblibrarian char(255) NOT NULL default '',
137                                                 libopac char(255) NOT NULL default '',
138                                                 repeatable tinyint(4) NOT NULL default '0',
139                                                 mandatory tinyint(4) NOT NULL default '0',
140                                                 kohafield char(40)  default NULL,
141                                                 tab tinyint(1) default NULL,
142                                                 authorised_value char(10) default NULL,
143                                                 thesaurus_category char(10) default NULL,
144                                                 value_builder char(80) default NULL,
145                                                 PRIMARY KEY  (tagfield,tagsubfield),
146                                                 KEY kohafield (kohafield),
147                                                 KEY tab (tab)
148                                                 )",
149     marc_subfield_table => "(
150                                                 subfieldid bigint(20) unsigned NOT NULL auto_increment,
151                                                 bibid bigint(20) unsigned NOT NULL default '0',
152                                                 tag char(3) NOT NULL default '',
153                                                 tagorder tinyint(4) NOT NULL default '1',
154                                                 tag_indicator char(2) NOT NULL default '',
155                                                 subfieldcode char(1) NOT NULL default '',
156                                                 subfieldorder tinyint(4) NOT NULL default '1',
157                                                 subfieldvalue varchar(255) default NULL,
158                                                 valuebloblink bigint(20) default NULL,
159                                                 PRIMARY KEY  (subfieldid),
160                                                 KEY bibid (bibid),
161                                                 KEY tag (tag),
162                                                 KEY tag_indicator (tag_indicator),
163                                                 KEY subfieldorder (subfieldorder),
164                                                 KEY subfieldcode (subfieldcode),
165                                                 KEY subfieldvalue (subfieldvalue),
166                                                 KEY tagorder (tagorder)
167                                         )",
168     marc_tag_structure => "(
169                                         tagfield char(3) NOT NULL default '',
170                                         liblibrarian char(255) NOT NULL default '',
171                                         libopac char(255) NOT NULL default '',
172                                         repeatable tinyint(4) NOT NULL default '0',
173                                         mandatory tinyint(4) NOT NULL default '0',
174                                         authorised_value char(10) default NULL,
175                                         PRIMARY KEY  (tagfield)
176                                         )",
177     marc_word => "(
178                                 bibid bigint(20) NOT NULL default '0',
179                                 tag char(3) NOT NULL default '',
180                                 tagorder tinyint(4) NOT NULL default '1',
181                                 subfieldid char(1) NOT NULL default '',
182                                 subfieldorder tinyint(4) NOT NULL default '1',
183                                 word varchar(255) NOT NULL default '',
184                                 sndx_word varchar(255) NOT NULL default '',
185                                 KEY bibid (bibid),
186                                 KEY tag (tag),
187                                 KEY tagorder (tagorder),
188                                 KEY subfieldid (subfieldid),
189                                 KEY subfieldorder (subfieldorder),
190                                 KEY word (word),
191                                 KEY sndx_word (sndx_word)
192                         )",
193     marc_breeding => "(  id bigint(20) NOT NULL auto_increment,
194                                 file varchar(80) NOT NULL default '',
195                                 isbn varchar(10) NOT NULL default '',
196                                 title varchar(128) default NULL,
197                                 author varchar(80) default NULL,
198                                 marc text NOT NULL,
199                                 encoding varchar(40) default NULL,
200                                 PRIMARY KEY  (id),
201                                 KEY title (title),
202                                 KEY isbn (isbn)
203                         )",
204     authorised_values => "(id int(11) NOT NULL auto_increment,
205                                 category char(10) NOT NULL default '',
206                                 authorised_value char(80) NOT NULL default '',
207                                 lib char(80) NULL,
208                                 PRIMARY KEY  (id),
209                                 KEY name (category)
210                         )",
211     userflags => "( bit int(11) NOT NULL default '0',
212                                 flag char(30), flagdesc char(255),
213                                 defaulton int(11)
214                         )",
215         auth_types => "(
216                                         authtypecode char(10) not NULL,
217                                         authtypetext char(255) not NULL,
218                                         auth_tag_to_report char(3) not NULL,
219                                         summary text not NULL,
220                                         PRIMARY KEY (authtypecode)
221                         )",
222         biblio_framework => "(
223                                         frameworkcode char(4) not NULL,
224                                         frameworktext char(255) not NULL,
225                                         PRIMARY KEY (frameworkcode)
226                         )",
227     auth_subfield_structure => "(
228                                         authtypecode char(10) NOT NULL default '',
229                                         tagfield char(3) NOT NULL default '',
230                                         tagsubfield char(1) NOT NULL default '',
231                                         liblibrarian char(255) NOT NULL default '',
232                                         libopac char(255) NOT NULL default '',
233                                         repeatable tinyint(4) NOT NULL default '0',
234                                         mandatory tinyint(4) NOT NULL default '0',
235                                         tab tinyint(1) default NULL,
236                                         authorised_value char(10) default NULL,
237                                         value_builder char(80) default NULL,
238                                         seealso char(255) default NULL,
239                                         PRIMARY KEY  (authtypecode,tagfield,tagsubfield),
240                                         KEY tab (authtypecode,tab)
241                                         )",
242     auth_tag_structure => "(
243                                         authtypecode char(10) NOT NULL default '',
244                                         tagfield char(3) NOT NULL default '',
245                                         liblibrarian char(255) NOT NULL default '',
246                                         libopac char(255) NOT NULL default '',
247                                         repeatable tinyint(4) NOT NULL default '0',
248                                         mandatory tinyint(4) NOT NULL default '0',
249                                         authorised_value char(10) default NULL,
250                                         PRIMARY KEY  (authtypecode,tagfield)
251                                         )",
252     auth_header => "(
253                                                 authid bigint(20) unsigned NOT NULL auto_increment,
254                                                 authtypecode char(10) NOT NULL default '',
255                                                 datecreated date NOT NULL default '0000-00-00',
256                                                 datemodified date default NULL,
257                                                 origincode char(20) default NULL,
258                                                 PRIMARY KEY  (authid),
259                                                 KEY origincode (origincode),
260                                                 ) ",
261     auth_subfield_table => "(
262                                                 subfieldid bigint(20) unsigned NOT NULL auto_increment,
263                                                 authid bigint(20) unsigned NOT NULL default '0',
264                                                 tag char(3) NOT NULL default '',
265                                                 tagorder tinyint(4) NOT NULL default '1',
266                                                 tag_indicator char(2) NOT NULL default '',
267                                                 subfieldcode char(1) NOT NULL default '',
268                                                 subfieldorder tinyint(4) NOT NULL default '1',
269                                                 subfieldvalue varchar(255) default NULL,
270                                                 PRIMARY KEY  (subfieldid),
271                                                 KEY authid (authid),
272                                                 KEY tag (tag),
273                                                 KEY subfieldcode (subfieldcode),
274                                                 KEY subfieldvalue (subfieldvalue)
275                                         )",
276     auth_word => "(
277                                 authid bigint(20) NOT NULL default '0',
278                                 tagsubfield char(4) NOT NULL default '',
279                                 tagorder tinyint(4) NOT NULL default '1',
280                                 subfieldorder tinyint(4) NOT NULL default '1',
281                                 word varchar(255) NOT NULL default '',
282                                 sndx_word varchar(255) NOT NULL default '',
283                                 KEY authid (authid),
284                                 KEY marc_search (tagsubfield,word),
285                                 KEY word (word),
286                                 KEY sndx_word (sndx_word)
287                         )",
288         suggestions => "(
289                                 suggestionid int(8) NOT NULL auto_increment,
290                                 suggestedby int(11) NOT NULL default '0',
291                                 managedby int(11) default NULL ,
292                                 STATUS varchar(10) NOT NULL default '',
293                                 note text,
294                                 author varchar(80) default NULL ,
295                                 title varchar(80) default NULL ,
296                                 copyrightdate smallint(6) default NULL ,
297                                 publishercode varchar(255) default NULL ,
298                                 date timestamp(8) NOT NULL ,
299                                 volumedesc varchar(255) default NULL ,
300                                 publicationyear smallint(6) default '0',
301                                 place varchar(255) default NULL ,
302                                 isbn varchar(10) default NULL ,
303                                 mailoverseeing smallint(1) default '0',
304                                 biblionumber int(11) default NULL ,
305                                 PRIMARY KEY (suggestionid) ,
306                                 KEY suggestedby(suggestedby) ,
307                                 KEY managedby(managedby)
308                         )",
309         aqbasket => "(basketno int(11) NOT NULL auto_increment,
310                                 creationdate date,
311                                 closedate date,
312                                 booksellerid varchar(10),
313                                 authorisedby varchar(10),
314                                 booksellerinvoicenumber text,
315                                 PRIMARY KEY (basketno)
316                                 )",
317         serial => "(serialid int(11) NOT NULL auto_increment,
318                                 biblionumber varchar(100) NOT NULL default '',
319                                 subscriptionid varchar(100) NOT NULL default '',
320                                 serialseq varchar(100) NOT NULL default '',
321                                 status tinyint(4) NOT NULL default '0',
322                                 planneddate date NOT NULL default '0000-00-00',
323                                 PRIMARY KEY  (serialid)
324                                 )",
325         subscription => "(biblionumber int(11) NOT NULL default '0',
326                                                 subscriptionid int(11) NOT NULL auto_increment,
327                                                 librarian varchar(100) default '',
328                                                 startdate date default '0000-00-00',
329                                                 aqbooksellerid int(11) default '0',
330                                                 cost int(11) default '0',
331                                                 aqbudgetid int(11) default '0',
332                                                 weeklength tinyint(4) default '0',
333                                                 monthlength tinyint(4) default '0',
334                                                 numberlength tinyint(4) default '0',
335                                                 periodicity tinyint(4) default '0',
336                                                 dow varchar(100) default '',
337                                                 numberingmethod varchar(100) default '',
338                                                 notes text,
339                                                 status varchar(100) NOT NULL default '',
340                                                 add1 int(11) default 0,
341                                                 every1 int(11) default 0,
342                                                 whenmorethan1 int(11) default 0,
343                                                 setto1 int(11),
344                                                 lastvalue1 int(11),
345                                                 add2 int(11) default 0,
346                                                 every2 int(11) default 0,
347                                                 whenmorethan2 int(11) default 0,
348                                                 setto2 int(11),
349                                                 lastvalue2 int(11),
350                                                 add3 int(11) default 0,
351                                                 every3 int(11) default 0,
352                                                 innerloop1 int(11) default 0,
353                                                 innerloop2 int(11) default 0,
354                                                 innerloop3 int(11) default 0,
355                                                 whenmorethan3 int(11) default 0,
356                                                 setto3 int(11),
357                                                 lastvalue3 int(11),
358                                                 PRIMARY KEY  (subscriptionid)
359                                                 )",
360         subscriptionhistory => "(biblionumber int(11) NOT NULL default '0',
361                                                         subscriptionid int(11) NOT NULL default '0',
362                                                         histstartdate date NOT NULL default '0000-00-00',
363                                                         enddate date default '0000-00-00',
364                                                         missinglist longtext NOT NULL,
365                                                         recievedlist longtext NOT NULL,
366                                                         opacnote varchar(150) NOT NULL default '',
367                                                         librariannote varchar(150) NOT NULL default '',
368                                                         PRIMARY KEY  (subscriptionid),
369                                                         KEY biblionumber (biblionumber)
370                                                 )",
371 );
372
373 my %requirefields = (
374     biblio        => { 'abstract' => 'text' },
375     deletedbiblio => { 'abstract' => 'text', 'marc' => 'blob' },
376     deleteditems => { 'marc' => 'blob', 'paidfor' => 'text', 'location' => 'varchar(80)'},
377     biblioitems   => {
378         'lccn' => 'char(25)',
379         'url'  => 'varchar(255)',
380         'marc' => 'text'
381     },
382     deletedbiblioitems => {
383         'lccn' => 'char(25)',
384         'url'  => 'varchar(255)',
385         'marc' => 'text'
386     },
387     branchtransfers => { 'datearrived'    => 'datetime' },
388     statistics      => { 'borrowernumber' => 'int(11)' },
389     aqbooksellers   => {
390         'invoicedisc' => 'float(6,4)',
391         'nocalc'      => 'int(11)'
392     },
393     borrowers => {
394                 'userid'        => 'char(30)',
395                 'password'      => 'char(30)',
396                 'flags'         => 'int(11)',
397                 'textmessaging' => 'varchar(30)',
398                 'zipcode' => 'varchar(25)',
399                 'homezipcode' => 'varchar(25)',
400                 'sort1' => 'char(80)',
401                 'sort2' => 'char(80)',
402     },
403     aqorders => { 'budgetdate' => 'date',
404                                 'sort1' => 'char(80)',
405                                 'sort2' => 'char(80)', },
406     aqbudget => {'aqbudgetid' => 'tinyint(4) auto_increment primary key'},
407     items => {'paidfor' => 'text', 'location' => 'char(80)'},
408
409     #added so that reference items are not available for reserves...
410     itemtypes         => { 'notforloan'  => 'smallint(6)' },
411     systempreferences => { 'explanation' => 'char(80)',
412                            'type' => 'char(20)',
413                            'options' => 'text' },
414     z3950servers      => { 'syntax'      => 'char(80)' },
415         marc_tag_structure =>{
416                                                         'frameworkcode' => 'char(4) not NULL default \'\''},
417     marc_subfield_structure =>{'seealso'  => 'char(255)',
418                                                         'frameworkcode' => 'char(4) not NULL default \'\'',
419                                                         'hidden' => 'tinyint(1)',
420                                                         'isurl' => 'tinyint(1)',
421                                                         'link' => 'char(80)',
422                                                         },
423     bookshelf => {'owner' => 'char(80)',
424                                         'category' => 'char(1)',
425                                 },
426     marc_biblio        => { 'frameworkcode' => 'char(4) not NULL default \'\'' },
427 );
428
429 my %dropable_table = (
430     classification => 'classification',
431     multipart      => 'multipart',
432     multivolume    => 'multivolume',
433     newitems       => 'newitems',
434     procedures     => 'procedures',
435     publisher      => 'publisher',
436     searchstats    => 'searchstats',
437     serialissues   => 'serialissues',
438 );
439
440 my %uselessfields = (
441         aqorders => "requisitionedby,authorisedby,booksellerid,
442                         deliverydays,followupdays,
443                         numberfollowupsallowed,numberfollowupssent,
444                         dateprinted,sourced,quantityreceiveddamaged,
445                         subscriptionfrom,subscriptionto
446                         "
447         );
448 # the other hash contains other actions that can't be done elsewhere. they are done
449 # either BEFORE of AFTER everything else, depending on "when" entry (default => AFTER)
450
451 # The tabledata hash contains data that should be in the tables.
452 # The uniquefieldrequired hash entry is used to determine which (if any) fields
453 # must not exist in the table for this row to be inserted.  If the
454 # uniquefieldrequired entry is already in the table, the existing data is not
455 # modified, unless the forceupdate hash entry is also set.  Fields in the
456 # anonymous "forceupdate" hash will be forced to be updated to the default
457 # values given in the %tabledata hash.
458
459 my %tabledata = (
460     userflags => [
461         {
462             uniquefieldrequired => 'bit',
463             bit                 => 0,
464             flag                => 'superlibrarian',
465             flagdesc            => 'Access to all librarian functions',
466             defaulton           => 0
467         },
468         {
469             uniquefieldrequired => 'bit',
470             bit                 => 1,
471             flag                => 'circulate',
472             flagdesc            => 'Circulate books',
473             defaulton           => 0
474         },
475         {
476             uniquefieldrequired => 'bit',
477             bit                 => 2,
478             flag                => 'catalogue',
479             flagdesc            => 'View Catalogue (Librarian Interface)',
480             defaulton           => 0
481         },
482         {
483             uniquefieldrequired => 'bit',
484             bit                 => 3,
485             flag                => 'parameters',
486             flagdesc            => 'Set Koha system paramters',
487             defaulton           => 0
488         },
489         {
490             uniquefieldrequired => 'bit',
491             bit                 => 4,
492             flag                => 'borrowers',
493             flagdesc            => 'Add or modify borrowers',
494             defaulton           => 0
495         },
496         {
497             uniquefieldrequired => 'bit',
498             bit                 => 5,
499             flag                => 'permissions',
500             flagdesc            => 'Set user permissions',
501             defaulton           => 0
502         },
503         {
504             uniquefieldrequired => 'bit',
505             bit                 => 6,
506             flag                => 'reserveforothers',
507             flagdesc            => 'Reserve books for patrons',
508             defaulton           => 0
509         },
510         {
511             uniquefieldrequired => 'bit',
512             bit                 => 7,
513             flag                => 'borrow',
514             flagdesc            => 'Borrow books',
515             defaulton           => 1
516         },
517         {
518             uniquefieldrequired => 'bit',
519             bit                 => 8,
520             flag                => 'reserveforself',
521             flagdesc            => 'Reserve books for self',
522             defaulton           => 0
523         },
524         {
525             uniquefieldrequired => 'bit',
526             bit                 => 9,
527             flag                => 'editcatalogue',
528             flagdesc  => 'Edit Catalogue (Modify bibliographic/holdings data)',
529             defaulton => 0
530         },
531         {
532             uniquefieldrequired => 'bit',
533             bit                 => 10,
534             flag                => 'updatecharges',
535             flagdesc            => 'Update borrower charges',
536             defaulton           => 0
537         },
538     ],
539     systempreferences => [
540         {
541             uniquefieldrequired => 'variable',
542             forceupdate         => { 'explanation' => 1,
543                                      'type' => 1 },
544             variable            => 'LibraryName',
545             value               => '<i><b>Koha<br/>Free Software ILS<br/><br/></b>Koha : a gift, a contribution<br/> in Maori</i>',
546             explanation         => 'Library name as shown on main opac page',
547             type                => ''
548
549         },
550         {
551             uniquefieldrequired => 'variable',
552             forceupdate         => { 'explanation' => 1,
553                                      'type' => 1 },
554             variable            => 'autoMemberNum',
555             value               => '1',
556             explanation         => 'Member number is auto-calculated',
557             type                => 'YesNo'
558
559         },
560         {
561             uniquefieldrequired => 'variable',
562             forceupdate         => { 'explanation' => 1,
563                                      'type' => 1,
564                                      'options' => 1 },
565             variable            => 'acquisitions',
566             value               => 'normal',
567             explanation         =>
568 'Normal, budget-based acquisitions, or Simple bibliographic-data acquisitions',
569             type                => 'Choice',
570             options             => 'simple|normal'
571         },
572         {
573             uniquefieldrequired => 'variable',
574             forceupdate         => { 'explanation' => 1,
575                                      'type' => 1,
576                                      'options' => 1 },
577             variable            => 'dateformat',
578             value               => 'metric',
579             explanation         =>
580             'date format (us mm/dd/yyyy, metric dd/mm/yyy, ISO yyyy/mm/dd)',
581             type                => 'Choice',
582             options             => 'metric|us|iso'
583         },
584         {
585             uniquefieldrequired => 'variable',
586             variable            => 'template',
587             forceupdate         => { 'explanation' => 1,
588                                      'type' => 1 },
589             value               => 'default',
590             explanation         => 'Preference order for intranet interface templates',
591             type                => 'Themes'
592         },
593         {
594             uniquefieldrequired => 'variable',
595             variable            => 'autoBarcode',
596             forceupdate         => { 'explanation' => 1,
597                                      'type' => 1 },
598             value               => 'yes',
599             explanation         => 'Barcode is auto-calculated',
600             type                => 'YesNo'
601         },
602         {
603             uniquefieldrequired => 'variable',
604             variable            => 'insecure',
605             forceupdate         => { 'explanation' => 1,
606                                      'type' => 1 },
607             value               => 'no',
608             explanation         =>
609 'If YES, no auth at all is needed. Be careful if you set this to yes!',
610             type                => 'YesNo'
611         },
612         {
613             uniquefieldrequired => 'variable',
614             variable            => 'authoritysep',
615             forceupdate         => { 'explanation' => 1,
616                                      'type' => 1,
617                                      'options' => 1 },
618             value               => '--',
619             explanation         =>
620             'the separator used in authority/thesaurus. Usually --',
621             type                => 'free',
622             options             => '10'
623         },
624         {
625             uniquefieldrequired => 'variable',
626             variable            => 'opaclanguages',
627             forceupdate         => { 'explanation' => 1,
628                                      'type' => 1 },
629             value               => 'en',
630             explanation         => 'Set the preferred order for translations.  The top language will be tried first.',
631             type                => 'Languages'
632         },
633         {
634             uniquefieldrequired => 'variable',
635             variable            => 'opacthemes',
636             forceupdate         => { 'explanation' => 1,
637                                      'type' => 1 },
638             value               => 'css',
639             explanation         => 'Set the preferred order for themes.  The top theme will be tried first.',
640             type                => 'Themes'
641         },
642         {
643             uniquefieldrequired => 'variable',
644             variable            => 'timeout',
645             forceupdate         => { 'explanation' => 1,
646                                      'type' => 1 },
647             value               => '1200',
648             explanation         => 'Inactivity timeout for cookies authentication (in seconds)',
649             type                => 'Integer'
650         },
651         {
652             uniquefieldrequired => 'variable',
653             variable            => 'marc',
654             forceupdate         => { 'explanation' => 1,
655                                      'type' => 1 },
656             value               => 'yes',
657             explanation         => 'Turn on MARC support',
658             type                => 'YesNo'
659         },
660         {
661             uniquefieldrequired => 'variable',
662             variable            => 'marcflavour',
663             forceupdate         => { 'explanation' => 1,
664                                      'type' => 1,
665                                      'options' => 1},
666             value               => 'MARC21',
667             explanation         =>
668             'your MARC flavor (MARC21 or UNIMARC) used for character encoding',
669             type                => 'Choice',
670             options             => 'MARC21|UNIMARC'
671         },
672         {
673             uniquefieldrequired => 'variable',
674             variable            => 'checkdigit',
675             value               => 'none',
676             forceupdate         => { 'explanation' => 1,
677                                      'type' => 1,
678                                      'options' => 1},
679             explanation         => 'Validity checks on membership number: none or "Katipo" style checks',
680             type                => 'Choice',
681             options             => 'none|katipo'
682         },
683         {
684             uniquefieldrequired => 'variable',
685             variable            => 'maxoutstanding',
686             forceupdate         => { 'explanation' => 1,
687                                      'type' => 1 },
688             value               => '5',
689             explanation         =>
690             'maximum amount withstanding to be able make reserves ',
691             type                => 'Integer'
692         },
693         {
694             uniquefieldrequired => 'variable',
695             variable            => 'maxreserves',
696             forceupdate         => { 'explanation' => 1,
697                                      'type' => 1 },
698             value               => '5',
699             explanation         =>
700             'maximum number of reserves a member can make',
701             type                => 'Integer'
702
703         },
704         {
705             uniquefieldrequired => 'variable',
706             variable            => 'noissuescharge',
707             forceupdate         => { 'explanation' => 1,
708                                      'type' => 1 },
709             value               => '5',
710             explanation         =>
711             'maximum amount withstanding to be able to check out an item',
712             type                => 'Integer'
713
714         },
715         {
716             uniquefieldrequired => 'variable',
717             variable            => 'KohaAdminEmailAddress',
718             forceupdate         => { 'explanation' => 1,
719                                      'type' => 1 },
720             value               => 'your.mail@here',
721             explanation => 'the email address where borrowers modifs are sent',
722             type                => 'free'
723         },
724         {
725             uniquefieldrequired => 'variable',
726             variable            => 'gist',
727             forceupdate         => { 'explanation' => 1,
728                                      'type' => 1 },
729             value               => '0.125',
730             explanation => 'the gist rate. NOT in %, but in numeric form (0.12 for 12%)',
731             type                => 'free'
732         },
733         {
734             uniquefieldrequired => 'variable',
735             variable            => 'printcirculationslips',
736             forceupdate         => { 'explanation' => 1,
737                                      'type' => 1 },
738             value               => '0',
739             explanation => 'if set to 1, print circulation slips. If set to 0, don\'t',
740             type                => 'free'
741         },
742         {
743             uniquefieldrequired => 'variable',
744             variable            => 'suggestion',
745             forceupdate         => { 'explanation' => 1,
746                                      'type' => 1 },
747             value               => '0',
748             explanation => 'if set to 1, suggestions are activated in OPAC',
749             type                => 'free'
750         },
751         {
752             uniquefieldrequired => 'variable',
753             variable            => 'ISBD',
754             forceupdate         => { 'explanation' => 1,
755                                      'type' => 1 },
756             value               => 'Fill with appropriate value...',
757             explanation => 'ISBD',
758             type                => 'free'
759         },
760         {
761             uniquefieldrequired => 'variable',
762             variable            => 'virtualshelves',
763             forceupdate         => { 'explanation' => 1,
764                                      'type' => 1 },
765             value               => '0',
766             explanation => 'Set virtual shelves management ON or OFF',
767             type                => 'YesNo'
768         },
769     ],
770
771 );
772
773 my %fielddefinitions = (
774     printers => [
775         {
776             field   => 'printername',
777             type    => 'char(40)',
778             null    => '',
779             key     => 'PRI',
780             default => ''
781         },
782     ],
783     aqbookfund => [
784         {
785             field   => 'bookfundid',
786             type    => 'char(5)',
787             null    => '',
788             key     => 'PRI',
789             default => ''
790         },
791     ],
792     aqbudget => [
793         {
794             field   => 'aqbudgetid',
795             type    => 'tinyint(4)',
796             null    => '',
797             key     => 'PRI',
798                   default =>'',
799             extra => 'auto_increment'
800         },
801     ],
802     z3950servers => [
803         {
804             field   => 'id',
805             type    => 'int',
806             null    => '',
807             key     => 'PRI',
808             default => '',
809             extra   => 'auto_increment'
810         },
811     ],
812         marc_breeding => [
813         {
814             field   => 'z3950random',
815             type    => 'varchar(40)',
816             null    => 'NULL',
817             key     => '',
818             default => '',
819             extra   => ''
820         },
821         {
822             field   => 'encoding',
823             type    => 'varchar(40)',
824             null    => '',
825             key     => '',
826             default => '',
827             extra   => ''
828         },
829     ],
830 );
831
832 #-------------------
833 # Initialize
834
835 # Start checking
836
837 # Get version of MySQL database engine.
838 my $mysqlversion = `mysqld --version`;
839 $mysqlversion =~ /Ver (\S*) /;
840 $mysqlversion = $1;
841 if ( $mysqlversion ge '3.23' ) {
842     print "Could convert to MyISAM database tables...\n" unless $silent;
843 }
844
845 #---------------------------------
846 # Tables
847
848 # Collect all tables into a list
849 $sth = $dbh->prepare("show tables");
850 $sth->execute;
851 while ( my ($table) = $sth->fetchrow ) {
852     $existingtables{$table} = 1;
853 }
854
855
856 # Now add any missing tables
857 foreach $table ( keys %requiretables ) {
858     unless ( $existingtables{$table} ) {
859         print "Adding $table table...\n" unless $silent;
860         my $sth = $dbh->prepare("create table $table $requiretables{$table}");
861         $sth->execute;
862         if ( $sth->err ) {
863             print "Error : $sth->errstr \n";
864             $sth->finish;
865         }    # if error
866     }    # unless exists
867 }    # foreach
868
869 # now drop useless tables
870 foreach $table ( keys %dropable_table ) {
871         if ( $existingtables{$table} ) {
872                 print "Dropping unused table $table\n" if $debug and not $silent;
873                 $dbh->do("drop table $table");
874                 if ( $dbh->err ) {
875                         print "Error : $dbh->errstr \n";
876                 }
877         }
878 }
879 unless ( $existingtables{'z3950servers'} ) {
880         #MJR: added syntax entries to close bug 624
881     print "Adding z3950servers table...\n" unless $silent;
882     my $sti = $dbh->prepare( "create table z3950servers (
883                                                                                 host char(255),
884                                                                                 port int,
885                                                                                 db char(255),
886                                                                                 userid char(255),
887                                                                                 password char(255),
888                                                                                 name text,
889                                                                                 id int,
890                                                                                 checked smallint,
891                                                                                 rank int,
892                                                                                 syntax char(80))"
893     );
894     $sti->execute;
895     $sti = $dbh->prepare( "insert into z3950servers
896                                                                 values ('z3950.loc.gov',
897                                                                 7090,
898                                                                 'voyager',
899                                                                 '', '',
900                                                                 'Library of Congress',
901                                                                 1, 1, 1, 'USMARC')"
902     );
903     $sti->execute;
904 }
905 unless ( $existingtables{'issuingrules'} ) {
906         $dbh->do("alter table categoryitem rename issuingrules");
907         $dbh->do("ALTER TABLE issuingrules ADD maxissueqty int(4) default NULL");
908         $dbh->do("ALTER TABLE issuingrules ADD issuelength int(4) default NULL");
909         $dbh->do("ALTER TABLE issuingrules ADD branchcode varchar(4) NOT NULL default ''");
910         print "renaming categoryitem\n" unless $silent;
911 }
912
913
914 #---------------------------------
915 # Columns
916
917 foreach $table ( keys %requirefields ) {
918     print "Check table $table\n" if $debug and not $silent;
919     $sth = $dbh->prepare("show columns from $table");
920     $sth->execute();
921     undef %types;
922     while ( ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
923     {
924         $types{$column} = $type;
925     }    # while
926     foreach $column ( keys %{ $requirefields{$table} } ) {
927         print "  Check column $column  [$types{$column}]\n" if $debug and not $silent;
928         if ( !$types{$column} ) {
929
930             # column doesn't exist
931             print "Adding $column field to $table table...\n" unless $silent;
932             $query = "alter table $table
933                         add column $column " . $requirefields{$table}->{$column};
934             print "Execute: $query\n" if $debug;
935             my $sti = $dbh->prepare($query);
936             $sti->execute;
937             if ( $sti->err ) {
938                 print "**Error : $sti->errstr \n";
939                 $sti->finish;
940             }    # if error
941         }    # if column
942     }    # foreach column
943 }    # foreach table
944
945 foreach $table ( keys %fielddefinitions ) {
946         print "Check table $table\n" if $debug;
947         $sth = $dbh->prepare("show columns from $table");
948         $sth->execute();
949         my $definitions;
950         while ( ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
951         {
952                 $definitions->{$column}->{type}    = $type;
953                 $definitions->{$column}->{null}    = $null;
954                 $definitions->{$column}->{key}     = $key;
955                 $definitions->{$column}->{default} = $default;
956                 $definitions->{$column}->{extra}   = $extra;
957         }    # while
958         my $fieldrow = $fielddefinitions{$table};
959         foreach my $row (@$fieldrow) {
960                 my $field   = $row->{field};
961                 my $type    = $row->{type};
962                 my $null    = $row->{null};
963                 my $key     = $row->{key};
964                 my $default = $row->{default};
965                 $default="''" unless $default;
966                 my $extra   = $row->{extra};
967                 my $def     = $definitions->{$field};
968                 unless ( $type eq $def->{type}
969                         && $null eq $def->{null}
970                         && $key eq $def->{key}
971                         && $default eq $def->{default}
972                         && $extra eq $def->{extra} )
973                 {
974
975                         if ( $null eq '' ) {
976                                 $null = 'NOT NULL';
977                         }
978                         if ( $key eq 'PRI' ) {
979                                 $key = 'PRIMARY KEY';
980                         }
981                         unless ( $extra eq 'auto_increment' ) {
982                                 $extra = '';
983                         }
984                         # if it's a new column use "add", if it's an old one, use "change".
985                         my $action;
986                         if ($definitions->{$field}->{type}) {
987                                 $action="change $field"
988                         } else {
989                                 $action="add";
990                         }
991 # if it's a primary key, drop the previous pk, before altering the table
992                         my $sth;
993                         if ($key ne 'PRIMARY KEY') {
994                                 $sth =$dbh->prepare("alter table $table $action $field $type $null $key $extra default ?");
995                         } else {
996                                 $sth =$dbh->prepare("alter table $table drop primary key, $action $field $type $null $key $extra default ?");
997                         }
998                         $sth->execute($default);
999                         print "  Alter $field in $table\n" unless $silent;
1000                 }
1001         }
1002 }
1003
1004 # Get list of columns from borrowers table
1005 my %itemtypes;
1006 my %nullenabled;
1007 $sth = $dbh->prepare("show columns from borrowers");
1008 $sth->execute;
1009 while ( my ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
1010 {
1011     $itemtypes{$column} = $type;
1012     $nullenabled{$column} = $null;
1013 }
1014
1015 unless ( $itemtypes{'cardnumber'} eq 'varchar(20)' ) {
1016     $itemtypes{'cardnumber'} =~ /varchar\((\d+)\)/;
1017     my $oldlength = $1;
1018     if ( $oldlength < 16 ) {
1019         print "Setting maximum cardnumber length to 16 (was $oldlength) and marking unique.\n" unless $silent;
1020         my $sti =
1021           $dbh->prepare(
1022             "alter table borrowers change cardnumber cardnumber varchar(16)");
1023         $sti->execute;
1024         $sti->finish;
1025         $sti =
1026           $dbh->prepare(
1027             "alter table borrowers drop index cardnumber");
1028         $sti->execute;
1029         $sti->finish;
1030         $sti =
1031           $dbh->prepare(
1032             "alter table borrowers add unique(cardnumber)");
1033         $sti->execute;
1034         $sti->finish;
1035     }
1036 }
1037 #
1038 # Get list of columns from items table
1039 $sth = $dbh->prepare("show columns from items");
1040 $sth->execute;
1041 while ( my ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
1042 {
1043     $itemtypes{$column} = $type;
1044     $nullenabled{$column} = $null;
1045 }
1046
1047 unless ( $itemtypes{'barcode'} eq 'varchar(20)' ) {
1048     $itemtypes{'barcode'} =~ /varchar\((\d+)\)/;
1049     my $oldlength = $1;
1050     if ( $oldlength < 20 ) {
1051         print "Setting maximum barcode length to 20 (was $oldlength).\n" unless $silent;
1052         my $sti =
1053           $dbh->prepare(
1054             "alter table items change barcode barcode varchar(20)");
1055         $sti->execute;
1056     }
1057 }
1058 #
1059 # dropping unique barcode index & setting barcode to null allowed.
1060 #
1061 $sth = $dbh->prepare("show index from items");
1062 $sth->execute;
1063 while ( my ( $table, $non_unique, $key_name, $Seq_in_index, $Column_name, $Collation, $cardinality, $sub_part, $Packed, $comment ) = $sth->fetchrow )
1064 {
1065         if ($key_name eq 'barcode' && $non_unique eq 0) {
1066                 print "dropping BARCODE index to enable empty barcodes\n" unless $silent;
1067                 $dbh->do("ALTER TABLE `items` DROP INDEX `barcode`");
1068         }
1069 }
1070 $dbh->do("ALTER TABLE `items` CHANGE `barcode` `barcode` VARCHAR( 20 )") unless ($nullenabled{barcode} eq 'YES');
1071
1072 #
1073 # creating fulltext index in bibliothesaurus if needed
1074 #
1075 $sth = $dbh->prepare("show index from bibliothesaurus");
1076 $sth->execute;
1077 my $exists=0;
1078 while ( my ( $table, $non_unique, $key_name, $Seq_in_index, $Column_name, $Collation, $cardinality, $sub_part, $Packed, $comment ) = $sth->fetchrow )
1079 {
1080         if ($key_name eq 'category_2') {
1081                 $exists=1;
1082         }
1083 }
1084 print "Creating fulltext index on bibliothesaurus\n" unless $exists or $silent;
1085 $dbh->do('create fulltext index category_2 on bibliothesaurus (category,freelib)') unless $exists;
1086
1087 #
1088 # creating  index in z3950results if needed
1089 #
1090 $sth = $dbh->prepare("show index from z3950results");
1091 $sth->execute;
1092 my $exists=0;
1093 while ( my ( $table, $non_unique, $key_name, $Seq_in_index, $Column_name, $Collation, $cardinality, $sub_part, $Packed, $comment ) = $sth->fetchrow )
1094 {
1095         if ($key_name eq 'query_server') {
1096                 $exists=1;
1097         }
1098 }
1099 print "Creating  index on z3950results\n" unless $exists or $silent;
1100 $dbh->do('create unique index query_server on z3950results (queryid,server)') unless $exists;
1101
1102 # changing z3950daemon field to NULL in marc_breeding
1103 $dbh->do("ALTER TABLE `marc_breeding` CHANGE `z3950random` `z3950random` VARCHAR( 40 )");
1104
1105 # making borrowernumber an auto_increment field
1106 $dbh->do("ALTER TABLE `borrowers` CHANGE `borrowernumber` `borrowernumber` INTEGER auto_increment");
1107
1108 # changing indexes in marc_*_structure to use frameworkcode
1109 $dbh->do('alter table marc_subfield_structure drop index tab');
1110 $dbh->do('create index tab on marc_subfield_structure (frameworkcode,tab)');
1111 $dbh->do('alter table marc_subfield_structure drop index kohafield');
1112 $dbh->do('create index kohafield on marc_subfield_structure (frameworkcode,kohafield)');
1113
1114
1115 # extending the timestamp in branchtransfers...
1116 my %branchtransfers;
1117
1118 $sth = $dbh->prepare("show columns from branchtransfers");
1119 $sth->execute;
1120 while ( my ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
1121 {
1122     $branchtransfers{$column} = $type;
1123 }
1124
1125 unless ( $branchtransfers{'datesent'} eq 'datetime' ) {
1126     print "Setting type of datesent in branchtransfers to datetime.\n" unless $silent;
1127     my $sti =
1128       $dbh->prepare(
1129         "alter table branchtransfers change datesent datesent datetime");
1130     $sti->execute;
1131 }
1132
1133 unless ( $branchtransfers{'datearrived'} eq 'datetime' ) {
1134     print "Setting type of datearrived in branchtransfers to datetime.\n" unless $silent;
1135     my $sti =
1136       $dbh->prepare(
1137         "alter table branchtransfers change datearrived datearrived datetime");
1138     $sti->execute;
1139 }
1140
1141 # changing the branchcategories table around...
1142 my %branchcategories;
1143
1144 $sth = $dbh->prepare("show columns from branchcategories");
1145 $sth->execute;
1146 while ( my ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
1147 {
1148     $branchcategories{$column} = $type;
1149 }
1150
1151 unless ( $branchcategories{'categorycode'} eq 'varchar(4)' ) {
1152     print
1153 "Setting type of categorycode in branchcategories to varchar(4),\n and making the primary key.\n" unless $silent;
1154     my $sti =
1155       $dbh->prepare(
1156 "alter table branchcategories change categorycode categorycode varchar(4) not null"
1157     );
1158     $sti->execute;
1159     $sti =
1160       $dbh->prepare(
1161         "alter table branchcategories add primary key (categorycode)");
1162     $sti->execute;
1163 }
1164
1165 unless ( $branchcategories{'categoryname'} eq 'text' ) {
1166     print "Changing branchcode in branchcategories to categoryname text.\n" unless $silent;
1167     my $sth =
1168       $dbh->prepare(
1169         "alter table branchcategories change branchcode categoryname text");
1170     $sth->execute;
1171 }
1172
1173 unless ( $branchcategories{'codedescription'} eq 'text' ) {
1174     print
1175 "Replacing branchholding in branchcategories with codedescription text.\n" unless $silent;
1176     my $sth =
1177       $dbh->prepare(
1178         "alter table branchcategories change branchholding codedescription text"
1179     );
1180     $sth->execute;
1181 }
1182
1183 # changing the items table around...
1184 my %items;
1185
1186 $sth = $dbh->prepare("show columns from items");
1187 $sth->execute;
1188 while ( my ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
1189 {
1190     $items{$column} = $type;
1191 }
1192
1193 if ($items{'bulk'} eq "varchar(30)") {
1194     print "  Setting callnumber in items table\n" unless $silent;
1195     my $sti =
1196       $dbh->prepare("ALTER TABLE `items` CHANGE `bulk` `itemcallnumber` VARCHAR( 30 ) DEFAULT NULL");
1197     $sti->execute;
1198     $sti = $dbh->prepare("update marc_subfield_structure set kohafield=\"items.itemcallnumber\" where kohafield=\"items.bulk\"");
1199     $sti->execute;
1200 }
1201
1202 # changing the marc_subfield_structure table around...
1203 my %marc_subfield_structure;
1204
1205 $sth = $dbh->prepare("show columns from marc_subfield_structure");
1206 $sth->execute;
1207 while ( my ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
1208 {
1209     $marc_subfield_structure{$column} = $type;
1210 }
1211
1212 if ($marc_subfield_structure{thesaurus_category}) {
1213     print "  changing thesaurus_category in marc_subfield_structure table\n" unless $silent;
1214     my $sti =
1215       $dbh->prepare("ALTER TABLE marc_subfield_structure CHANGE `thesaurus_category` `authtypecode` VARCHAR(10 ) DEFAULT NULL");
1216     $sti->execute;
1217 }
1218
1219 #
1220 # creating  index in issuingrules if needed
1221 #
1222 $sth = $dbh->prepare("show index from issuingrules");
1223 $sth->execute;
1224 my $exists=0;
1225 while ( my ( $table, $non_unique, $key_name, $Seq_in_index, $Column_name, $Collation, $cardinality, $sub_part, $Packed, $comment ) = $sth->fetchrow )
1226 {
1227         if ($key_name eq 'PRIMARY') {
1228                 $exists=1;
1229         }
1230 }
1231 print "Creating  index on issuing rules\n" unless $exists or $silent;
1232 $dbh->do('ALTER TABLE issuingrules ADD PRIMARY KEY ( branchcode, categorycode, itemtype )') unless $exists;
1233
1234 $dbh->do('ALTER TABLE marc_tag_structure drop primary key');
1235 $dbh->do('ALTER TABLE marc_tag_structure ADD PRIMARY KEY ( frameworkcode, tagfield )');
1236
1237 $dbh->do('ALTER TABLE marc_subfield_structure drop primary key');
1238 $dbh->do('ALTER TABLE marc_subfield_structure ADD PRIMARY KEY ( frameworkcode, tagfield, tagsubfield )');
1239
1240 # Get list of columns from marc_word table
1241 my %marc_word;
1242 my %nullenabled;
1243 $sth = $dbh->prepare("show columns from marc_word");
1244 $sth->execute;
1245 while ( my ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
1246 {
1247     $marc_word{$column} = $type;
1248     $nullenabled{$column} = $null;
1249 }
1250 if ($marc_word{subfieldid}) {
1251         #create field tagsubfield, copy tag+subfieldid, then drop tag and subfieldid
1252         print "Modifying marc_word (concat on tag and subfield for better perfs)\n" unless $silent;
1253         $dbh->do("ALTER TABLE `marc_word` ADD `tagsubfield` CHAR( 4 ) NOT NULL AFTER `bibid`");
1254         $dbh->do("update marc_word set tagsubfield=concat(tag,subfieldid)");
1255         $dbh->do("alter table marc_word drop tag");
1256         $dbh->do("alter table marc_word drop subfieldid");
1257         $dbh->do("create index Search_Marc on marc_word (tagsubfield,word)");
1258 }
1259 # Populate tables with required data
1260
1261 # fill aqbasket if it's empty and aqorder is not
1262 # => it means it has just been created & must be filled
1263 $sth = $dbh->prepare("select count(*) from aqbasket");
1264 $sth->execute;
1265 if ($sth->fetchrow == 0) {
1266         $sth = $dbh->prepare("select count(*) from aqorders");
1267         $sth->execute;
1268         if ($sth->fetchrow >0) {
1269                 print "Populating new table aqbasket\n";
1270                 print "IMPORTANT NOTE: error message \"Duplicate entry 'X' for key 1\" may appear. it should not be a real trouble\n";
1271                 $sth=$dbh->prepare("select distinct basketno,booksellerid,authorisedby,entrydate,booksellerinvoicenumber from aqorders");
1272                 $sth->execute;
1273                 my ($basketno,$booksellerid,$authorisedby,$entrydate,$booksellerinvoicenumber);
1274                 my $sth2 = $dbh->prepare("insert into aqbasket (basketno,creationdate,booksellerid,authorisedby,booksellerinvoicenumber) values (?,?,?,?,?)");
1275                 while (($basketno,$booksellerid,$authorisedby,$entrydate,$booksellerinvoicenumber) = $sth->fetchrow) {
1276                         print "$basketno,$entrydate,$booksellerid,$authorisedby,$booksellerinvoicenumber\n";
1277                         $sth2->execute($basketno,$entrydate,$booksellerid,$authorisedby,$booksellerinvoicenumber);
1278                 }
1279         }
1280 }
1281 foreach my $table ( keys %tabledata ) {
1282     print "Checking for data required in table $table...\n" unless $silent;
1283     my $tablerows = $tabledata{$table};
1284     foreach my $row (@$tablerows) {
1285         my $uniquefieldrequired = $row->{uniquefieldrequired};
1286         my $uniquevalue         = $row->{$uniquefieldrequired};
1287         my $forceupdate         = $row->{forceupdate};
1288         my $sth                 =
1289           $dbh->prepare(
1290 "select $uniquefieldrequired from $table where $uniquefieldrequired=?"
1291         );
1292         $sth->execute($uniquevalue);
1293         if ($sth->rows) {
1294             foreach my $field (keys %$forceupdate) {
1295                 if ($forceupdate->{$field}) {
1296                     my $sth=$dbh->prepare("update systempreferences set $field=? where $uniquefieldrequired=?");
1297                     $sth->execute($row->{$field}, $uniquevalue);
1298                 }
1299             }
1300         } else {
1301             print "Adding row to $table: " unless $silent;
1302             my @values;
1303             my $fieldlist;
1304             my $placeholders;
1305             foreach my $field ( keys %$row ) {
1306                 next if $field eq 'uniquefieldrequired';
1307                 next if $field eq 'forceupdate';
1308                 my $value = $row->{$field};
1309                 push @values, $value;
1310                 print "  $field => $value" unless $silent;
1311                 $fieldlist .= "$field,";
1312                 $placeholders .= "?,";
1313             }
1314             print "\n" unless $silent;
1315             $fieldlist    =~ s/,$//;
1316             $placeholders =~ s/,$//;
1317             my $sth =
1318               $dbh->prepare(
1319                 "insert into $table ($fieldlist) values ($placeholders)");
1320             $sth->execute(@values);
1321         }
1322     }
1323 }
1324
1325 # at last, remove useless fields
1326 foreach $table ( keys %uselessfields ) {
1327         my @fields = split /,/,$uselessfields{$table};
1328         my $fields;
1329         my $exists;
1330         foreach my $fieldtodrop (@fields) {
1331                 $fieldtodrop =~ s/\t//g;
1332                 $fieldtodrop =~ s/\n//g;
1333                 $exists =0;
1334                 $sth = $dbh->prepare("show columns from $table");
1335                 $sth->execute;
1336                 while ( my ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
1337                 {
1338                         $exists =1 if ($column eq $fieldtodrop);
1339                 }
1340                 if ($exists) {
1341                         print "deleting $fieldtodrop field in $table...\n" unless $silent;
1342                         my $sth = $dbh->prepare("alter table $table drop $fieldtodrop");
1343                         $sth->execute;
1344                 }
1345         }
1346 }    # foreach
1347
1348
1349 $sth->finish;
1350
1351 exit;
1352
1353 # $Log$
1354 # Revision 1.96  2004/11/16 13:03:45  tipaul
1355 # removing ldap systempref, it's now in C4/Auth_with_ldap.pm separate package
1356 #
1357 # Revision 1.95  2004/11/08 19:57:32  tipaul
1358 # bugfix
1359 #
1360 # Revision 1.94  2004/09/06 10:00:29  tipaul
1361 # adding a "location" field to the library.
1362 # This field is useful when the callnumber contains no information on the room where the item is stored.
1363 # With this field, we now have 3 levels of informations to find a book :
1364 # * the branch.
1365 # * the location.
1366 # * the callnumber.
1367 #
1368 # This should be versatile enough to solve any storing method.
1369 # This hack is quite simple, due to the nice Biblio.pm API. The MARC => koha db link is automatically managed. Just add the link in the parameters section.
1370 #
1371 # Revision 1.93  2004/08/12 14:50:50  tipaul
1372 # bugfixes
1373 #
1374 # Revision 1.92  2004/08/06 16:38:42  tipaul
1375 # changing DB structure to calculate next issue number.
1376 # Seems to work fine.
1377 #
1378 # Still misses the date calculation & the test of end of subscription (maybe for monday ?)
1379 #
1380 # Revision 1.91  2004/07/15 09:52:28  tipaul
1381 # Acquisition & Suggestion :
1382 # * acquisition rewritte : create a aqbasket table to deal with "bookseller order header".
1383 # * add "close basket" feature : a closed basket can't be modified
1384 # * suggestion feature : manage suggestions in acquisition (after suggestion filled in OPAC)
1385 #
1386 # Revision 1.90  2004/07/06 08:24:18  tipaul
1387 # adding 2 free fields that can be used for sorting purposes
1388 #
1389 # Revision 1.89  2004/07/02 15:55:08  tipaul
1390 # Adding 2 new fields, called "sort1" and "sort2"
1391 # They can be used for sorting & statistics reasons by the library.
1392 #
1393 # Revision 1.88  2004/06/26 23:34:26  rangi
1394 # Fixing typo
1395 #
1396 # Revision 1.87  2004/06/23 13:03:09  tipaul
1397 # fixes in DB structure
1398 #
1399 # Revision 1.86  2004/06/22 11:30:57  tipaul
1400 # adding -s (silent) flag, to have a silent install.
1401 # only updater will be verbose
1402 #
1403 # Revision 1.85  2004/06/17 15:19:44  tipaul
1404 # missing Marc_Search index on marc_word
1405 #
1406 # Revision 1.84  2004/06/17 08:25:21  tipaul
1407 # DB modifs : merging tag & subfield in marc_word table
1408 #
1409 # Revision 1.83  2004/06/10 08:32:02  tipaul
1410 # MARC authority management (continued)
1411 #
1412 # Revision 1.82  2004/06/03 12:46:58  tipaul
1413 # * frameworks and itemtypes are independant
1414 #
1415 # WARNING : will work only if applied to a 2.0 base. some modifs have been done since last commit that will NOT be applied if you run updatedatabase again.
1416 #
1417 # Revision 1.81  2004/05/28 09:56:21  tipaul
1418 # bugfix
1419 #
1420 # Revision 1.80  2004/05/28 08:32:00  tipaul
1421 # adding :
1422 # * MARC authority file
1423 # * seealso & hidden in MARC biblio structure.
1424 #
1425 # Revision 1.79  2004/05/18 09:50:07  tipaul
1426 # *** empty log message ***
1427 #
1428 # Revision 1.78  2004/05/10 09:29:33  tipaul
1429 # css is now the default theme for OPAC.
1430 # It will be the theme used for improvements and new things in OPAC.
1431 #
1432 # Revision 1.77  2004/05/06 14:56:51  tipaul
1433 # adding table issuingrules (previously called categoryitem
1434 #
1435 # Revision 1.76  2004/05/03 09:32:25  tipaul
1436 # adding printcirculationsplit parameter (already existed, but was not in systempref by defaul)
1437 #
1438 # Revision 1.75  2004/04/14 19:49:00  tipaul
1439 # seealso field set to 255 chars
1440 #
1441 # Revision 1.74  2004/03/11 16:10:16  tipaul
1442 # *** empty log message ***
1443 #
1444 # Revision 1.73  2004/03/06 20:26:13  tipaul
1445 # adding seealso feature in MARC searches
1446 #