remove all accents from pager links

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@789 13eb9ef6-21d5-0310-b721-a9d68796d827

merge fix from trunk to all branches

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@782 13eb9ef6-21d5-0310-b721-a9d68796d827

switch back to GDBM_File which is included in recent
Debian, and TDB_File won't compile against tdb-dev

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@775 13eb9ef6-21d5-0310-b721-a9d68796d827

use join_subfields_with from Biblio::Isis 0.23 to handle repeatable subfields

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@750 13eb9ef6-21d5-0310-b721-a9d68796d827

added check for broken CDATA at beginning, fix also broken delimiters

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@747 13eb9ef6-21d5-0310-b721-a9d68796d827

fix mem_lookup with values which include characters which can be interpreted as regexes

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@742 13eb9ef6-21d5-0310-b721-a9d68796d827

strip script name from self URL

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@733 13eb9ef6-21d5-0310-b721-a9d68796d827

support distinct flag for field to show just unique values if field is
repeatable

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@730 13eb9ef6-21d5-0310-b721-a9d68796d827

fix start_row when using excel import

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@726 13eb9ef6-21d5-0310-b721-a9d68796d827

fix transfer of multiple v42= fields when generating url_params (this
occured when you tried to use checkboxes to select multiple items and then
click on title of result)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@725 13eb9ef6-21d5-0310-b721-a9d68796d827

Implemented persistent filter which can be used in index or search to
specify database name to limit search to. Filter searches are presistant.

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@698 13eb9ef6-21d5-0310-b721-a9d68796d827

WebPAC cgi will now set it's own locale (using configuration directive in
global.conf)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@696 13eb9ef6-21d5-0310-b721-a9d68796d827

bugfix for phrases (again): never assume entity name...

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@688 13eb9ef6-21d5-0310-b721-a9d68796d827

phrase search fix: escape quotes in hidden variables

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@686 13eb9ef6-21d5-0310-b721-a9d68796d827

transfer filter variable in index to template (it can be useful)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@685 13eb9ef6-21d5-0310-b721-a9d68796d827

added import_xml_file and import_xml_tag into configuration file,
documentation for .dbf import

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@679 13eb9ef6-21d5-0310-b721-a9d68796d827

Experimental support for dBase .dbf files. Usege like this in all2xml.conf:

[hda]
       dbf_file=/data/drustvene/hda/ISO.DBF
       type=dbf
       dbf_codepage=cp852
       dbf_mapping=<<_END_OF_MAP_
ID_BROJ                001
ISBN_BROJ      010
SKUPINA1       200
SKUPINA2       205
SKUPINA4       210
SKUPINA5       215
SKUPINA6       225
SKUPINA7       300
ANOTACIJA      330
PREDMET1       610
PREDMET2       610
PREDMET3       510
UDK            675
REDALICA       700
SIGNATURA      990
_END_OF_MAP_

dbf type will use <isis> tag in import_xml and dbf_codepage will
override codepage specified in import_xml file.

Small code refactoring.

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@678 13eb9ef6-21d5-0310-b721-a9d68796d827

fix phrase search ("something else")

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@677 13eb9ef6-21d5-0310-b721-a9d68796d827

added support for submit button "reset" which will reset form (you can't
really use type="reset" with persitant search variables enabled).

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@676 13eb9ef6-21d5-0310-b721-a9d68796d827

bugfix: re-enable HTML::FillInForm to create persistent search using
<TMPL_VAR NAME="SEARCH_HIDDEN"> in form which has just "back to search"
button. You can use this variable to dump persistant search variables
without rm (runmode of CGI::Application)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@675 13eb9ef6-21d5-0310-b721-a9d68796d827

bugfix: check Isis database error in correct place

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@673 13eb9ef6-21d5-0310-b721-a9d68796d827

bugfix: now database names are always transfered to filtering function
(previously it work with Isis databases)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@672 13eb9ef6-21d5-0310-b721-a9d68796d827

be more forgiving to changes in results templates

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@670 13eb9ef6-21d5-0310-b721-a9d68796d827

filter to checked documents

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@660 13eb9ef6-21d5-0310-b721-a9d68796d827

added sort by any combination of swish-e fields which are defined by
PropertyNames in swish_isis.conf. This allowed adition of links which show
search results sorted by time, author and title then author or autor than
titme combination.

Any combination of fields for sorting can be specified (separated by spaces),
with optional asc(ending) or desc(ending) order.

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@659 13eb9ef6-21d5-0310-b721-a9d68796d827

report error and don't die

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@657 13eb9ef6-21d5-0310-b721-a9d68796d827

don't show 0 in pager if no results are found

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@656 13eb9ef6-21d5-0310-b721-a9d68796d827

SQLite fixes: rename index table to data (index is reserved word),
SQLite doesn't allow placeholders in limit and offset, see:
http://thread.gmane.org/gmane.comp.db.sqlite.general/9707

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@651 13eb9ef6-21d5-0310-b721-a9d68796d827

bugfixes and improvements: skip MARC databases that can't be opened,
fix progress bar on MARC databases (so that it finish on 100%),
minor pod update

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@650 13eb9ef6-21d5-0310-b721-a9d68796d827

use SQLite again

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@648 13eb9ef6-21d5-0310-b721-a9d68796d827

don't die if ISIS database is not found, just go to next one

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@647 13eb9ef6-21d5-0310-b721-a9d68796d827

updated development from production

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@644 13eb9ef6-21d5-0310-b721-a9d68796d827

add filtering to index (using parameter filter, for now single)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@643 13eb9ef6-21d5-0310-b721-a9d68796d827

renamed tag to finger to avoid confusion (I tried to exmplain why I use term
tag and failed -- it too similar to tags used in import_xml)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@642 13eb9ef6-21d5-0310-b721-a9d68796d827

New implementation of indexes: now it uses only two tables (index for all
data and tags for all tags). Currently, it doesn't enforce relation between
them on RDBMS level (I have to test this code against SQLite and MySQL
before enforcing that).
Removed swish-e output while indexing, database is used as default tag to
enable filtering by database (there isn't possiblity to set tag to something
else yet!). Output usage count in index.

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@641 13eb9ef6-21d5-0310-b721-a9d68796d827

All-wrong-and-ugly solution to using exact match variables which are
persistent: it's not supported any more. However, until we have real
separation of variables comming from user, via format and/or from links
(right now, they are all using f/v) this problem can't be fixed right.
Much nicer error mesages ("Software error") instead of "Internal Server Error".

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@639 13eb9ef6-21d5-0310-b721-a9d68796d827

don't add unneeded delimiter

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@638 13eb9ef6-21d5-0310-b721-a9d68796d827

Implemented persist_search hidden variable in forms which can specify
(multiple) number of variables which should be persistent after user
specified them in form (useful for language for example). Values are
separated by comma (,). Some cleanup and warning removal.

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@636 13eb9ef6-21d5-0310-b721-a9d68796d827

use Bibio::Isis istead of IsisDB (same module, but name is changed for CPAN
upload)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@632 13eb9ef6-21d5-0310-b721-a9d68796d827

correct support for accented letters entered as html entities in input data.

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@631 13eb9ef6-21d5-0310-b721-a9d68796d827

yet another progress bar fix

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@628 13eb9ef6-21d5-0310-b721-a9d68796d827

fix for progress bar (don't fake slowdown)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@626 13eb9ef6-21d5-0310-b721-a9d68796d827

cleanup and documentation updates

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@623 13eb9ef6-21d5-0310-b721-a9d68796d827

use IsisDB module instead of OpenIsis -- this will fix various problems in
index generation becasue IsisDB doesn't have problems as OpenIsis perl
bindings does.

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@622 13eb9ef6-21d5-0310-b721-a9d68796d827

small tool to compare to files which are produced for swish-e -S prog

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@621 13eb9ef6-21d5-0310-b721-a9d68796d827

use newer MARC::File::USMARC instead of MARC

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@620 13eb9ef6-21d5-0310-b721-a9d68796d827

upgrade from MARC to MARC::File::USMARC, take MFN from data
M    dump_marc.pl

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@619 13eb9ef6-21d5-0310-b721-a9d68796d827

new nicer progress bar (back-ported from v2)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@618 13eb9ef6-21d5-0310-b721-a9d68796d827

design changes (and translation to Croatian)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@617 13eb9ef6-21d5-0310-b721-a9d68796d827

improvement: path limit in URL works without full result display

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@600 13eb9ef6-21d5-0310-b721-a9d68796d827

fix repeatable field names which have non 7-bit ascii characters

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@599 13eb9ef6-21d5-0310-b721-a9d68796d827

changes to support UTF-8 encoding from
SpreadSheet::ParseExcel::FmtDefault.

You will have to modify line 69 from
return pack('C*', unpack('n*', $sTxt));
to following which returns utf-8:
return pack('U*', unpack('n*', $sTxt));

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@488 13eb9ef6-21d5-0310-b721-a9d68796d827

bug fix when transfering fields with multiple values (e.g. checkboxes) to
pager (hidden fields that is)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@457 13eb9ef6-21d5-0310-b721-a9d68796d827

better check if table exists (so that DBD::SQLite upgrade won't break)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@399 13eb9ef6-21d5-0310-b721-a9d68796d827

don't be greedy when trying to find end of eval{...}
This enables inserting { } into field after eval

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@384 13eb9ef6-21d5-0310-b721-a9d68796d827

fixed direct memory lookup, workaround for strange
bug when requested output is scalar; it will ignore
first element which works but is not totally correct

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@383 13eb9ef6-21d5-0310-b721-a9d68796d827

if field in eval isn't repeatable use first value,
return eval errors

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@381 13eb9ef6-21d5-0310-b721-a9d68796d827

create missing lookup files

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@379 13eb9ef6-21d5-0310-b721-a9d68796d827

back-ported unlimited recursive mem_lookup from webpac v2.
Now you can say something like [[[900]]] and it will produce
tripple lookup (as opposed to double which was maximum in old
version).

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@351 13eb9ef6-21d5-0310-b721-a9d68796d827

removed template

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@350 13eb9ef6-21d5-0310-b721-a9d68796d827

set enviroment variables LC_COLLATE and LC_CTYPE (needed by SQLite to
convert charset to upper characters correctly)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@344 13eb9ef6-21d5-0310-b721-a9d68796d827

fixed parsing for science direct html with more than one <a href=> per one <tr>
support to force input file (if you uncomment filename in script)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@338 13eb9ef6-21d5-0310-b721-a9d68796d827

save MFN as field 001

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@336 13eb9ef6-21d5-0310-b721-a9d68796d827

print warning if type is not handled (probably a typo)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@333 13eb9ef6-21d5-0310-b721-a9d68796d827

various fixes

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@330 13eb9ef6-21d5-0310-b721-a9d68796d827

don't die on field which can't be parsed (just print warning), corrected
subfield order for field 210

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@329 13eb9ef6-21d5-0310-b721-a9d68796d827

command line parametars are now working (xml files are at end, so that shell
glob will work), misc improvements

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@328 13eb9ef6-21d5-0310-b721-a9d68796d827

first really working version: support single and repeating fields correctly,
output encodings implemented, support for indicators

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@327 13eb9ef6-21d5-0310-b721-a9d68796d827

fixes, cleanups, you know: on the way to usable version

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@326 13eb9ef6-21d5-0310-b721-a9d68796d827

first try at converting MODS XML records back to MARC

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@325 13eb9ef6-21d5-0310-b721-a9d68796d827

fix of a fix (case)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@322 13eb9ef6-21d5-0310-b721-a9d68796d827

implement my_unac_string function, and my_unac_filter option in global.conf
which you *REALLY* want to use if you don't have only clean 7-bit characters
in your data

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@320 13eb9ef6-21d5-0310-b721-a9d68796d827

fix CROASCII (B1.002:1982) filter

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@318 13eb9ef6-21d5-0310-b721-a9d68796d827

make distribution from SubVersion repository

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@317 13eb9ef6-21d5-0310-b721-a9d68796d827

Major change:

I no longer user HTML::Pager, SWISH and SWISH::Fork modules,
but SWISH::API (new interface to swish 2.4.x, which is required) and own
implementation of pager.

That saves round-trips of all results from swish-e to memory and to
HTML::Pager so this produces also significant speedup when result set is
large (tipically if you entered just a letter or two with huge number of
records).

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@304 13eb9ef6-21d5-0310-b721-a9d68796d827

bug fix: support for working from root of virtual host

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@302 13eb9ef6-21d5-0310-b721-a9d68796d827

even more detail explanation

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@300 13eb9ef6-21d5-0310-b721-a9d68796d827

explanation of bit-masks with examples

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@299 13eb9ef6-21d5-0310-b721-a9d68796d827

You can now specify configuration file as command-line option, and
if you don't do that, it will use default one called all2xml.conf

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@298 13eb9ef6-21d5-0310-b721-a9d68796d827

removed unneeded warning

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@297 13eb9ef6-21d5-0310-b721-a9d68796d827

bug fix: eval now honours codepage settings

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@293 13eb9ef6-21d5-0310-b721-a9d68796d827

delimiter and append now works as expected

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@290 13eb9ef6-21d5-0310-b721-a9d68796d827

fix

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@287 13eb9ef6-21d5-0310-b721-a9d68796d827

merge changes from trunk to branches, converted all import_xml

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@286 13eb9ef6-21d5-0310-b721-a9d68796d827

preserve other attributes

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@285 13eb9ef6-21d5-0310-b721-a9d68796d827

converted delimiters to new format

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@281 13eb9ef6-21d5-0310-b721-a9d68796d827

script to convert delimiters

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@280 13eb9ef6-21d5-0310-b721-a9d68796d827

Implemented new form of delimiters like this:

<tag>
<delimiter>, </delimiter>
<value>200a</value>
</tag>

which is equivavelnt to following old mark-up:

<tag delimiter=", ">200a</tag>

but, it won't loose spaces in attribute values (which
are invalid by XML specification and XML::Simple removes
them so WebPac never get them)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@279 13eb9ef6-21d5-0310-b721-a9d68796d827

moved tests in own directory, added test to demonstrate XML::Simple feature
to remove spaces from begin and end attribute value (which is wrong for
delimiters as WebPAC uses them)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@278 13eb9ef6-21d5-0310-b721-a9d68796d827

ported 269:272 from hidra

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@275 13eb9ef6-21d5-0310-b721-a9d68796d827

<config> tags (which use values from all2xml.conf) are now properly handled
if there is more than one in same swish tag. However, to use <config
type="index"> is useless IMHO, and <config type="index_lookup"> is not
implemented.

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@274 13eb9ef6-21d5-0310-b721-a9d68796d827

"show details" now work corretly when not on first page

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@271 13eb9ef6-21d5-0310-b721-a9d68796d827

ported r260 from hidra branch: moved eval to parse_format.pm where it
belongs. Also changed eval format to: eval{v901^a eq "Mikrotezaurus"}
(please note same format as in ISIS formating language)

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@263 13eb9ef6-21d5-0310-b721-a9d68796d827

ported 257:258 from hidra branch
all2xml.pl - fix for swish without filter
openisis/perl/OpenIsis.pm - removed warning

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@259 13eb9ef6-21d5-0310-b721-a9d68796d827

ported r254 from hidra branch

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@256 13eb9ef6-21d5-0310-b721-a9d68796d827

ported r248:252 from hidra branch:

r248: much improved installation instructions, especially for Debian
      GNU/Linux distributions
r249: changed use of Spreadsheet::ParseExcel and MARC to require/import so
      that dependency on those modules can be resolved in runtime.
r250: finished installation documentation
r251: removing dependency on HTML::Parser would ease installation
r252: smaller eval{} fiexes. eval{} logic should really move to
      parse_format.pm

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@255 13eb9ef6-21d5-0310-b721-a9d68796d827

implement close for perl OpenIsis bindings

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@240 13eb9ef6-21d5-0310-b721-a9d68796d827

including openisis 0.9.0 into webpac tree

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@239 13eb9ef6-21d5-0310-b721-a9d68796d827

preparation for first file dump at sourceforge.net

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@235 13eb9ef6-21d5-0310-b721-a9d68796d827

eval{...} now works for type="swish" also...

git-svn-id: file:///home/dpavlin/private/svn/webpac/trunk@234 13eb9ef6-21d5-0310-b721-a9d68796d827