ef5db9b7fe27b5af5eb4ecba370a31d130c3b536
[BackupPC.git] / ChangeLog
1 #========================================================================
2 #
3 # ChangeLog - change log for BackupPC.
4 #
5 # DESCRIPTION
6 #   Revision history for BackupPC, detailing significant changes between
7 #   versions, most recent first.
8 #
9 # AUTHOR
10 #   Craig Barratt  <cbarratt@users.sourceforge.net>
11 #
12 #========================================================================
13 #
14 # Version __VERSION__, released __RELEASEDATE__.
15 #
16 # See http://backuppc.sourceforge.net.
17 #
18 #========================================================================
19
20 #------------------------------------------------------------------------
21 # Version __VERSION__, __RELEASEDATE__
22 #------------------------------------------------------------------------
23
24 ** Add checksum caching info and file format to the docs.
25
26 * On the phase 2 retry pass with rsync, verify the cached checksums
27   if checksum caching is turned on.  This will catch the case of
28   cached checksums being incorrectly appended to the compressed
29   pool file.  Added new config parameter $Conf{RsyncCsumCacheVerifyProb}
30   so that cached checksums are verified with a selectable probability.
31   Also, increased File::RsyncP version number to 0.51.
32
33 * configure.pl now supports an optional batch mode.  Command-line
34   options are used to specify all the information that configure.pl
35   needs.  This is useful for buidling auto-install packages.
36   Also, configure.pl now includes pod documentation, so you can do
37   "perldoc configure.pl" to see all the command-line options.
38   Suggested, tested and tweaked by Stuart Herbert for possible
39   Gentoo inclusion.
40
41 * At each wakeup, clients are now queued based on how old the most
42   recent backup is.  Clients with errors are queued first, with
43   the oldest error times going first.  Clients with good backups
44   are queued next, with the oldest backup going first.  Previously
45   the clients were simply queued in alphabetic order.  Suggested
46   by Tony Nelson.
47
48 * Added config parameter $Conf{PartialAgeMax} that controls whether
49   partials are saved at all, and if so, whether the partial will be
50   ignored at the next full backup if it is too old.
51
52 * BackupPC_tarExtract now allows empty archives without reporting
53   an error.  Reported by Don Silvia.
54
55 * Removed Browse Backups link from Nav Bar in Archive Info display.
56   Reported by Ralph Paßgang.
57
58 * Fixed documentation display for regular users.  Reported by Ralph Paßgang.
59
60 * Status and PC Summary now work for regular users and only show
61   that user's hosts.  Server general status information only appears
62   for admins.  Suggested by Ralph Paßgang.
63
64 * Moved the last three navigation-bar links (docs, FAQ and SF) to
65   a new config parameter $Conf{CgiNavBarLinks}.  This allows
66   these links to be locally configured.  Based on a patch
67   submitted by Ralph Paßgang.
68
69 * Allow the navigation bar search box to be disabled by
70   setting $Conf{CgiSearchBoxEnable} to 0.  Based on a patch
71   submitted by Ralph Paßgang.
72
73 * Updates to de.pm from Ralph Paßgang.
74
75 * Made the BackupPC icon a link to the SF BackupPC project page.
76
77 #------------------------------------------------------------------------
78 # Version 2.1.0beta1, 4 Apr 2004
79 #------------------------------------------------------------------------
80
81 * The CSS definition has been removed from the config.pl file and
82   is now a separate file, BackupPC_stnd.css.  A new config variable,
83   $Conf{CgiCSSFile}, gives the name of the CSS file to use.
84   Suggested by Ender Mathias.
85
86 * Fixed the filling of the host name select box for admins.
87   The default $Conf{CgiNavBarAdminAllHosts} is now 1.
88   Reported by Doug Lytle.
89
90 * Cleaned up warning message for restore using rsync when checksum
91   caching is on, but when file didn't have cached checksums.
92
93 * Fixed BackupPC_archiveHost to support par2 (par2cmdline).
94   Patch submitted by Jaco Bongers and adapted by Josh Marshall.
95
96 * Improved stat() usage in BackupPC_nightly, plus some other cleanup,
97   giving a significant performance improvement.  Patch submitted by
98   Wayne Scott.
99
100 * Allow several BackupPC_nightly processes to run in parallel based
101   on new $Conf{BackupPCNightlyJobs} setting.  This speeds up the
102   traversal of the pool, reducing the overall run time for
103   BackupPC_nightly.
104
105 * Allow BackupPC_nightly to split the pool traversal across several
106   nightly runs.  This improves the running time per night, at the expense
107   of a slight increase in disk storage as unused pool files might not
108   be deleted for a couple of days.  Controller by new config setting
109   $Conf{BackupPCNightlyPeriod}.
110
111 #------------------------------------------------------------------------
112 # Version 2.1.0beta0, 20 Mar 2004
113 #------------------------------------------------------------------------
114
115 * A failed full dump is now saved as a partial (incomplete) dump,
116   provided it includes some files.  This can be used for browsing,
117   restoring etc, and will also form the basis of resuming full
118   dumps.  Only one partial is kept, and it is removed as soon
119   as a successful full (or a new partial) is done.
120
121 * Added support for resuming a full dump for rsync.  The partial
122   full is kept, and to resume an incremental is done against the
123   partial, and a full is done for the rest.
124
125 * Added support for Rsync checksum caching.  Rsync checksum are
126   appended to the compressed pool files.  This means that block
127   and file checksums do not need to be recomputed on the server
128   when using rsync.  Requires a patch to rsync to support fixed
129   checksum seeds.  This patch is included in the cygwin-rsyncd
130   release on http://backuppc.sourceforge.net.
131
132 * Major addition of Archive feature from Josh Marshall.  Special
133   clients can be configured to be archive targets (eg: tape drives,
134   CD-R).  Any subset of the backup clients can be selected and tar
135   archives are created, optionally compressed and split and written
136   to the output device.  Logs are maintained and are browsable.
137
138 * Major changes from Ryan Kucera to add style sheets to the CGI
139   interface, allowing easy customization.  Added new icons and
140   BackupPC logo.  Numerous navigation improvements.
141
142 * Added directory history display to BackupPC_Admin, allowing the
143   user to quickly see which files changed between backups on a
144   per-directory basis.
145
146 * Added exponential expiry option for full dumps.  This allows you
147   to specify
148   
149    - how many fulls to keep at intervals of $Conf{FullPeriod}, followed by
150    - how many fulls to keep at intervals of 2 * $Conf{FullPeriod},
151    - how many fulls to keep at intervals of 4 * $Conf{FullPeriod},
152    - how many fulls to keep at intervals of 8 * $Conf{FullPeriod},
153    - how many fulls to keep at intervals of 16 * $Conf{FullPeriod},
154
155   and so on.  This allows you, for example, to keep 4 weekly fulls,
156   followed by 6 fulls every 4 weeks (approx 1 month) and 2 fulls at
157   16 weeks, for roughly 1 year of history.  This works by deleting
158   every other full as each expiry boundary is crossed.  Suggested
159   by David Cramblett.
160
161 * Added Italian language translation it.pm from Lorenzo Cappelletti.
162
163 * Major updates to language files for new features and tags changes.
164   Updated makeDist to do pedantic consistency checking of language
165   files.
166
167 * Addition of administration options from Paul Lukins.  Initial
168   page allows server to be started/stopped/reloaded.  This still
169   needs some i18n work.  Currently the server start/stop is
170   commented out.
171
172 * Split BackupPC_Admin into a set of modules, one for each major action.
173   Each action is now a seperate module in lib/BackupPC/CGI.
174
175 * Allow the blackout period begin/end to span midnight.  Adapted
176   from patch submitted by David Smith.
177
178 * Allow multiple blackout periods, with new config variable
179   $Conf{BlackoutPeriods} that replaces the old variables
180   $Conf{BlackoutHourBegin}, $Conf{BlackoutHourEnd}, and
181   $Conf{BlackoutWeekDays}.  Based on patch submitted by
182   Lorenzo Cappelletti.
183
184 * Disabled alarms after forks to avoid timeouts in children that
185   do not reset their alarm.  Prompted by ideas from James Leu.
186
187 * Added options for block size, buffer size and share wild-card to
188   BackupPC_tarCreate.  Also added negative backup number options
189   that are relative to the last (so -1 is the last), suggested by
190   William McKee and Carl Soderstrom.
191
192 * Add creation of per-PC directory in BackupPC/CGI/Restore.pm in
193   case it doesn't already exist.
194
195 * Added -q -x to all ssh commands in conf/config.pl.  Suggested by
196   SI Reasoning and Niranjan Ghate.
197
198 * Changed restore code so that option #1 (direct restore) can be
199   disabled if the restore command is undefined.  Disabling direct
200   restore is necessary if the share is read-only.  Suggested by
201   Rich B from SAIC.
202
203 * Changed regexp in lib/BackupPC/Smb.pm to allow numbers with both
204   a decimal point or comma for international versions of Samba.
205   Patch submitted by Frank Gard.
206
207 * Browsing and directory history now sort the files in a
208   case-insensitive manner.
209
210 * Changed exec() syntax to allow executing commands whose path
211   contains spaces.
212
213 * Swapped the Server and Hosts sections on the Nav bar.  Moved the
214   host search text box to the top of the hosts section.  This was
215   done to move the variable-length part of the Nav bar (when all
216   hosts are displayed) to the bottom.
217
218 * Fixed a bug in tar restore related to how the common prefix path is
219   removed.  Now ensure that the common path is at a directory boundary.
220   Reported by Patrick Neuner.
221
222 * Added --chuid ${USER} to init.d/src/gentoo-backuppc.  Suggested by
223   SI Reasoning, Pascal Pochol, Michael Evanoff and others.
224
225 * Added Suse notes to init.d/README from Bruno Vernay.
226
227 * Added Apache 2 documentation fix from Michael Tuzi.
228
229 #------------------------------------------------------------------------
230 # Version 2.0.2, 6 Oct 2003
231 #------------------------------------------------------------------------
232
233 * Fixed stupid last-minute change in octal size conversion in
234   Backup_tarExtract.
235
236 #-----------------------------------------------------------------------
237 # Version 2.0.1, 5 Oct 2003
238 #------------------------------------------------------------------------
239
240 * Fixed handling of >= 8GB files in BackupPC_tarExtract and >= 4GB
241   files in BackupPC_tarCreate.
242
243 * Removed smbclient size repair in BackupPC_tarExtract for files
244   between 2GB and 4GB.  This means that BackupPC_tarExtract 2.0.1
245   doesn't behave the same as 2.0.0 for file sizes between 2GB and 4GB
246   extacted using smbclient 2.2.x.  If you have problems backing up
247   files whose size is between 2GB and 4GB using smbclient 2.2.x
248   you should upgrade smbclient to 3.0, since it now generates
249   correct file sizes.
250
251 * Replace PingClientPath with PingPath in configure.pl.
252
253 * Removed -T (taint mode) on binaries installed in configure.pl.
254
255 * Added support for smbclient from samba version 3.0.0.
256
257 * Fixed $Conf{HardLinkMax} limit check in BackupPC::Lib; reported
258   by Ross Skaliotis.
259
260 * In BackupPC_Admin, default REMOTE_USER to $Conf{BackupPCUser}
261   if it is not defined.  This allows the CGI interface to work
262   when AdminUsers = '*'.  Reported by Quentin Arce.
263
264 * For SMB, code that detected files with a read-locked region (eg:
265   outlook .pst files), removed them and then tried to link with an
266   earlier version was broken.  This code missed a step of mangling
267   the file names.  This is now fixed.  Reported by Pierre Bourgin.
268
269 * A backup of a share that has zero files is now considered
270   fatal. This is used to catch miscellaneous Xfer errors that
271   result in no files being backed up.  A new config parameter
272   $Conf{BackupZeroFilesIsFatal} (defaults to 1) and can be set to
273   zero to turn off this check.  Suggested by Guillaume Filion.
274   Additional change: this check only applies to a full dump.
275
276 * SMB: now detect NT_STATUS_ACCESS_DENIED on entire share or BackupFilesOnly
277   (also ERRDOS - ERRnoaccess (Access denied.) for older versions of
278   smbclient.)  Suggested by Guillaume Filion.
279
280 * SMB: now detects "tree connect failed: NT_STATUS_BAD_NETWORK_NAME" and
281   the dump is considered failed.
282
283 * Rsync: Previously BackupFilesOnly = '/' did --include '/' --exclude '/*',
284   which just included the '/' directory and nothing below.  Now it
285   does just --include '/', which should include everything.
286   Reported by denon.
287
288 * Add hostError to DumpPostUserCmd variable substitutions for both dump
289   and restore.
290
291 * Verbose output in Lib.pm goes to STDERR, not STDOUT.  This now
292   makes BackupPC_dump -v work better.
293
294 * Don't allow browsing with ".." in directory in case a user tries
295   to trick BackupPC_Admin into displaying directories outside where
296   they are allowed.
297
298 * Required File::RsyncP version is now 0.44, since File::RsyncP 0.44
299   fixes large file (>2GB) bugs.  Large file bugs reported by Steve
300   Waltner.
301
302 #------------------------------------------------------------------------
303 # Version 2.0.0, 14 Jun 2003
304 #------------------------------------------------------------------------
305
306 * Minor tweaks to disable utf8 on utf8-capable machines (eg: RH8+).
307   Added "no utf8" to all programs, and added binmode() to relevant
308   file handles.
309
310 #------------------------------------------------------------------------
311 # Version 2.0.0beta3, 1 Jun 2003
312 #------------------------------------------------------------------------
313
314 * Several improvements to restore: cancel now reports the correct
315   message and cleans up correctly.
316
317 * Rsync with whitespace and wildcard excludes fixed by replacing
318   argList with argList+ in config.pl plus a fix to Lib.pm for
319   shell escaping array arguments.
320
321 * Fixed rsync restore for character and block special devices
322   (major and minor device numbers weren't correctly restored).
323
324 * Fixed typo in bin/BackupPC_restore (XferLOG -> RestoreLOG).
325
326 * (Re)-fixed "Bad command" in log file when restore via tar or zip
327   file download is done.
328
329 * Added untaint to exec in Lib.pm to avoid tainted errors.
330
331 * Applied additional tweak to hilight patch from Tim Demarest.
332
333 * $Conf{CgiAdminUsers} = '*' now allows privileged even with REMOTE_USER
334   not set.
335
336 * Don't display RsyncdPasswd when displaying config.pl files.
337
338 * Replace pipe with socketpair in bin/BackupPC_dump and bin/BackupPC_restore,
339   which increases typical buffering from 4K to 16K-64K.  This improves the
340   performance.
341
342 * Add check on $ENV{LANG} setting do configure.pl: if LANG includes utf
343   then a warning is printed.
344
345 #------------------------------------------------------------------------
346 # Version 2.0.0beta2, 11 May 2003
347 #------------------------------------------------------------------------
348
349 * Added German translation, provided by Manfred Herrmann.
350
351 * Fixed large-file problem with rsync, reported by Manfred Herrmann.
352
353 * Fixed zip and tar file download from CGI under mod_perl.  Reported
354   by Pierre Bourgin and Paul Lukins.
355
356 * Fixed directory browsing and top-level directory browsing in 2.0.0beta0.
357   Reported by several users.
358
359 * Added -v option to BackupPC_dump for verbose output (useful when
360   you run the command manually).  Added messages for all exits.
361
362 * If nmblookup returns multiple IP addresses, NetBiosHostIPFind()
363   now returns the first IP address that matches the subnet mask.
364   Suggested by Tim Demarest.
365
366 * Fixed BackupPC::View so the top-level directory is handled correctly.
367   This allows the top-level share/directory to be restored via the
368   CGI interface.  Reported by several users.
369
370 * Fixed RsyncFileIO failures on certain large files by replacing seek()
371   with sysseek().  Reported by Manfred Herrmann.
372
373 * Added configurable highlighting of PC status in the CGI summary
374   screen; submitted by Tim Demarest.
375
376 * Fixed command queue CGI display; submitted by Tim Demarest.
377
378 * BackupPC_trashClean now logs an error if it can't remove all the
379   trash and then goes back to sleep, rather than continually trying.
380
381 * Moved correct user (uid) check into BackupPC::Lib so that all
382   applications do a user check if $Cong{BackupPCUserVerify} is
383   set.  The avoids the risk of manually running BackupPC_dump as
384   the wrong user.
385
386 * Loss of blackout now applies to "host not found" as well as no ping.
387   Reported by Dale Renton.
388
389 * "Host not found" is now treated in a similar manner to "no ping".
390
391 * Added suse-linux init.d script from Leon Letto.
392
393 * Added Gentoo linux init.d script from Tim Demarest.
394
395 * Applied additional i18n strings from GFK and the translation team.
396
397 * Fixed option parsing so that getopts errors are reported and we exit.
398
399 * Changed reporting of Xfer PIDs so that rsync cancel works correctly.
400
401 #------------------------------------------------------------------------
402 # Version 2.0.0beta1, 30 Mar 2003
403 #------------------------------------------------------------------------
404
405 * Added Spanish translation es.pm from Javier Gonzalez.
406
407 * Fixed CGI browse navigation bug that causes BackupPC_Admin to wedge
408   when directories were selected in a certain order.
409
410 * Fixed BackupPC::PoolWrite so that it can recover when the initial
411   file size is wrong.  This is needed since rsync could write a file
412   whose size is different from the initial size returned in the
413   file list when that file is updated while rsync is running.
414
415 * Added binmode(STDIN) to BackupPC_tarExtract, suggested by Pat LoPresti
416   to fix a problem a RedHat8 with perl 5.8.0.  It's unclear why this
417   helps, but it should be benign.  See:
418     http://sourceforge.net/mailarchive/forum.php?thread_id=1853018&forum_id=503
419
420 #------------------------------------------------------------------------
421 # Version 2.0.0beta0, 23 Feb 2003
422 #------------------------------------------------------------------------
423
424 * Support for rsync and rsyncd backup and restore.  Changes to
425   BackupPC_dump, BackupPC_restore, and new modules BackupPC::Xfer::Rsync
426   and BackupPC::Xfer::RsyncFileIO.
427
428 * Added internationalization (i18n) code from Xavier Nicollet,
429   with additions from Guillaume Filion.  Voila!  BackupPC_Admin
430   now supports English and French, and adding more languages is
431   now easy.  New config paramater $Conf{Language} sets the language.
432
433 * Added optional user-defined pre/post dump/restore commands, allowing
434   things like database shutdown/startup for dumps.
435
436 * Changed the way hosts are found.
437
438 * Added $Conf{ClientNameAlias}, which allows the name of the physical
439   client machine to be set.  This allows several different backup
440   "hosts" to all refer to the same physical machine, which is
441   convenient if several different types of data need to be backed
442   up, or if different parameters are needed for different parts of
443   the host.
444
445 * Replaced $Conf{PingArgs} with $Conf{PingCmd}, added $Conf{DfCmd},
446   $Conf{NmbLookupCmd} allowing all these commands to be fully
447   configured.  Also, all commands can also now be fragments of
448   perl code.
449
450 * Moved all smbclient commands into the config.pl file so the specific
451   arguments can be customized.  New config parameters are
452   $Conf{SmbClientFullCmd}, $Conf{SmbClientIncrCmd} and
453   $Conf{SmbClientRestoreCmd}.
454
455 * Added new BackupPC::View module that creates views of backups
456   (handling merging etc).  Updated BackupPC_Admin, BackupPC_zipCreate
457   and BackupPC_tarCreate to use BackupPC::View.  This removes lots
458   of merging and mangling code from the higher-level code.
459
460 * Added code from Toby Johnson that allows additional users to be
461   specified in the hosts file; these users can also view/start/stop
462   and restore backups for that host.  Also added a new config
463   setting $Conf{CgiNavBarAdminAllHosts} that allows all hosts to
464   be listed in the left nav bar for admins.
465
466 * Added $Conf{HardLinkMax} (default 31999) which sets the limit on
467   the maximum number of hardlinks per file in the pool.  If a file
468   ever gets to this number of links a new pool file is created to
469   handle additional links.
470
471 * Added $Conf{PerlModuleLoad}, which allows optional additional perl
472   modules to be loaded.
473
474 * Added $Conf{EMailUserDestDomain} and other EMail config settings to
475   allow language-specific default messages to be overridden.
476
477 * Added BPC_FTYPE_DELETED to lib/BackupPC/Attrib.pm, allowing deleted
478   files to be represented in the attrib file correctly.
479
480 * Added support for environment variable BPC_SMB_PASSWD, which is the
481   client's smb password.  This overrides the old environment variable
482   PASSWD.
483
484 * Added taint cleanup for perl5.8 to lib/BackupPC/Lib.pm.
485
486 * Changed $tar_unpack_header format in BackupPC_tarExtract to correctly
487   handle files with trailing spaces.
488
489 * Added catching of SIG_PIPE to BackupPC_dump, and changed catch_signal
490   to ignore multiple signals of the same type.
491
492 * Added reporting of the largest number of hardlinks in the pool to the
493   log file.
494
495 * Adding reporting of syntax errors in the per-PC config.pl file.
496
497 * Updated BackupPC_sendEmail to handle language-specific email messages.
498
499 * Allow client (host) names to contain spaces.  Spaces in host names
500   need to be escaped via "\" in the hosts file.  The user of spaces in
501   host names is discouraged, but they should work.  One feature that
502   doesn't work with host names that contain spaces is the highlighting
503   of that name in the log file display in the CGI interface.  There are
504   no plans to fix this.
505
506 * Renamed $Conf{SmbClientTimeout} to $Conf{ClientTimeout}.
507
508 * Fixed all open() calls to use 3 argument form to fix handling of file
509   names with trailing whitespace.  Also fixed CGI interface so these
510   file names are displayed correctly.
511
512 * Fixed new 2.0.0 CGI navigation bug that causes the top-level directory
513   to have a URL "&share=//boot&dir=" instead of "&share=/boot&dir=/".
514   Reported by Pascal Schelcher.  Fixed similar problem reported by
515   Doug Lytle.
516
517 * Added "PerlTaintCheck On" to the mod_perl section in the docs,
518   suggested by Tim Demarest.
519
520 #------------------------------------------------------------------------
521 # Version 1.5.0, 2 Aug 2002
522 #------------------------------------------------------------------------
523
524 * Changed conf/config.pl so that $Conf{TarIncrArgs} uses the --newer
525   option instead of --newer-mtime.  Also removed --atime-preserve from
526   $Conf{TarClientCmd}.  This makes the default settings work better
527   with tripwire.
528
529 * Fixed configure.pl so it correctly detects a running BackupPC <= v1.4.0
530   so it can correctly warn the user to stop it before upgrading.  Reported
531   by David Holland.
532
533 * Added missing ";" to entity escape in EscapeHTML in BackupPC_Admin.
534   Reported by Guillaume Filion.
535
536 * Added LDAP setup to documentation from David Holland.
537
538 * Tar.pm now adds a "." to file paths that start with "/", so that all
539   tar paths are relative.  From Ludovic Drolez.
540
541 #------------------------------------------------------------------------
542 # Version 1.5.0beta0, 30 Jun 2002
543 #------------------------------------------------------------------------
544
545 * A full set of restore options is now supported, including direct
546   restore via smbclient or tar or downloading a zip or tar file.
547
548 * Major additions to CGI script to support better directory navigation,
549   restore features and mod_perl.  Also, file downloads from the CGI
550   interface now correctly preserve the file name and provide the
551   correct Content-Type for the most common types of files.  Improved
552   directory navigation was contributed by Ryan Kucera.
553
554 * New script BackupPC_zipCreate (contributed by Guillaume Filion) is the
555   zip analog of BackupPC_tarCreate.  BackupPC_zipCreate can be used to
556   create a zip archive of any portion of a backup.
557
558 * Substantial additions to BackupPC_tarCreate to support restore,
559   including modifying path names, handling hardlinks, fixing
560   support of old backups without attributes (pre-v1.4.0).  Plus
561   BackupPC_tarCreate is now an offical part of the release.
562   (Lack of support for hardlinks was reported by John Stanley.)
563
564 * BackupPC_tarExtract now supports hardlinks and fixed pooling of
565   attribute files.
566
567 * A unix domain socket is now used for communication between the CGI
568   interface and BackupPC.  The original TCP socket is optional.  Sockets
569   are correctly re-initialized if config.pl is updated with new socket
570   settings.
571
572 * For improved security messages over the unix or TCP socket are protected
573   via an MD5 digest based on a shared secret, a sequence number, a time
574   stamp and a unique per-connection number.
575
576 * Additions to configure.pl to support install of directory navigation
577   images.
578
579 * Fixed case where $Conf{BackupFilesOnly} or $Conf{BackupFilesExclude}
580   were set to a single string or list (in v1.4.0 only the case of
581   hash worked correctly).  Reported by Phillip Bertolus.
582
583 * Fixed case of $Conf{BackoutGoodCnt} == 0.  This setting now makes the
584   client always subject to blackout, matching the comments in config.pl.
585   Also fixed handling of $Conf{BackoutGoodCnt} < 0 in the CGI script
586   reported by Pascal Schelcher.
587
588 * Fixed byte and file totals for tar backups, reported by several users.
589
590 * Fixed --newer-mtime date/timestamp format to make it ISO 8601 compliant,
591   suggested by Erminio Baranzini.
592
593 * Fixed handling of $Conf{BackupFilesOnly} in BackupPC::Xfer::Tar.pm, as
594   well as shell escaping of tar arguments.
595
596 * Fixed entity encoding of 8-bit characters in the CGI interface.
597
598 * Added optional CGI headers in $Conf{CgiHeaders} that by default
599   is set to a no-cache pragma.  Suggested by Benno Zuure.
600
601 #------------------------------------------------------------------------
602 # Version 1.4.0, 16 Mar 2002
603 #------------------------------------------------------------------------
604
605 * BackupPC now supports tar (in addition to smb) for extracting host    
606   data.  This is the most convenient option for linux/unix hosts.
607   Tar can be configured to run over ssh, rsh or to backup a local
608   nfs mount from the host.
609
610 * Support for special files, including symbolic links, fifo, character
611   and block device files has been added, so that all native linux/unix
612   file types can be correctly backed up when using tar transport.
613   Special files are all stored as regular files and the type attributes
614   are used to remember the original file type.
615
616 * All unix file attributes are now saved (and pooled when possible).
617   This includes user and group ownership, permissions, and modification
618   time.  Smbclient also does a reasonable job of emulating unix 
619   permissions (such as mtime), and these attributes get saved too.
620
621 * The new default is to not fill incremental dumps.  configure.pl
622   automatically sets $Conf{IncrFill} to 0.  The default was 1
623   (incrementals were filled with hardlinks).  Since the CGI
624   script does filling at browsing time, there is no need to
625   fill incremental dumps.
626
627 * Backup file names are now stored in "mangled" form. Each node of a
628   path is preceded by "f", and special characters (\n, \r, % and /) are
629   URI-encoded as "%xx", where xx is the ascii character's hex value. So
630   c:/craig/example.txt is now stored as fc/fcraig/fexample.txt. This
631   was done mainly so meta-data could be stored alongside the backup
632   files without name collisions.  In particular, the attributes for the
633   files in a directory are stored in a file called "attrib", and
634   mangling avoids file name collisions (I discarded the idea of having
635   a duplicate directory tree for every backup just to store the
636   attributes). Other meta-data (eg: rsync checksums) could be stored in
637   file names preceded by, eg, "c".  There are two other benefits to
638   mangling: the share name might contain "/" (eg: "/home/craig" for tar
639   transport), and I wanted that represented as a single level in the
640   storage tree.  Secondly, as files are written to NewFileList for later
641   processing by BackupPC_link, embedded newlines in the file's path
642   will cause problems which are avoided by mangling.
643
644   The CGI script undoes the mangling, so it is invisibe to the user.
645   Of course, old (unmangled) backups are still supported by the CGI
646   interface.
647
648 * Various changes to the CGI interface, BackupPC_Admin:
649
650   + Added button that allows users to manually start a full dump in
651     addition to the existing incremental dump.
652
653   + Added display of file attributes when browsing backups.
654
655   + Added an optional holdoff time specified by the user when canceling
656     a backup. BackupPC will not attempt any new backups for at least the
657     specified time. This holdoff time can be changed whether or not a
658     backup is running.
659
660   + Added supports for file mangling, and correct merging of unfilled
661     backups from mangled or unmangled (and compressed or uncompressed)
662     fulls when browsing or restoring.
663
664   + Only displays a "Start Incr Backup" button if there are already some
665     backups.
666
667   + For DHCP hosts, when a user tries to manually start a backup, add
668     a check for the netbios name of both the host the request came
669     from (REMOTE_ADDR) and the last known DHCP address for that host
670     to see if either address matches the host. If not, an error
671     message is display. The previous behavior was that only requests
672     from the client itself succeeded, and requests from other machines
673     quietly failed.
674
675 * Changed the version numbering to X.Y.Z, instead of X.0Y. This release
676   is 1.4.0. The first digit is for major new releases, the middle digit
677   is for significant feature releases and improvements, and the last
678   digit is for bug fixes. You should think of the old 1.00, 1.01, 1.02
679   and 1.03 as 1.0.0, ..., 1.3.0.
680
681 * BackupPC and the CGI script BackupPC_Admin now check that the effective
682   user id is correct to avoid accidentally launching BackupPC as the
683   wrong user or detecting CGI configuration problems.  This behavior
684   can be turned off using the $Conf{BackupPCUserVerify} option.
685
686 * In numerous places changed "Smb" to "Xfer" (eg: log file names) to
687   support generic names for both smb and tar transport methods.  The
688   CGI script checks for old names for backward compatibility.
689
690 * Major changed to Backup_dump to support new tar transport.  All transport
691   specific code moved into BackupPC::Xfer::Smb and BackupPC::Xfer::Tar
692   objects.
693
694 * Added workaround for a bug in Samba's smbclient for files between 2GB
695   and 4GB.  The file size in the tar header is incorrect.  This allows
696   files up to 4GB to work with smbclient, rather than 2GB.  To support
697   files larger than 2GB you must make sure perl is compiled with the
698   uselargefiles option (use "perl -V | egrep largefiles" to check) and
699   the pool directory must be on a file system that supports large files.
700
701 * Moved the pool writing code into a module BackupPC::PoolWrite.  This
702   allows the clever file pool checking (digest, uncompressing, comparing
703   etc with minimum disk IO) to be used easily in multiple places (eg: it
704   is now used for writing attribute files so they can be pooled).
705
706 * Changed MD5 to Digest::MD5 to avoid use of the depreceated MD5 module.
707
708 * Shortened default $Conf{MyPath} so that perl's taint mode is more likely
709   to be happy.  The old $Conf{MyPath} contained /usr/local/bin, which
710   on one user's machine was world writable and perl -T correctly
711   complained about it.
712
713 * Fixed ping command options in Lib.pm so that it works on OpenBSD.
714   Thanks to Kyle Amon for sending the fix.  Decided to move the
715   ping options from Lib.pm into config.pl (as $Conf{PingArgs}) and
716   now configure.pl tries to come up with a sensible default based on
717   the OS.
718
719 * Fixed argument checking in BackupPC_tarExtract to allow '$' in the
720   share name (eg: C$).  Thanks to Jules Agee for this fix.  Also
721   changed the default config.pl so that single quotes are used
722   everywhere so that people don't get tripped up putting '$' inside
723   double-quoted strings.
724
725 #------------------------------------------------------------------------
726 # Version 1.03, 9 Dec 2001
727 #------------------------------------------------------------------------
728
729 * BackupPC now has full support for compression.  There are now two
730   pool areas, the original pool for uncompressed files, and cpool for
731   compressed files. The compression is done by Compress::Zlib.
732   Compression reduces the pool disk usage by around 40%, although your
733   mileage may vary.  Compression is optional and can also be specified on
734   a per-PC basis (although this will cost more pool storage since many
735   backup files will have to be stored in both compressed and
736   uncompressed forms.
737
738 * A new script, BackupPC_compressPool, can be run to compress the entire
739   pool.  This is used once to migrate all the pool data from uncompressed
740   to compressed on existing installations.  Read the documentation
741   (Installing BackupPC/Compressing an existing pool) before running
742   BackupPC_compressPool!
743
744   Alternatively, compression can simply be turned on and all new backups
745   will be compressed. Both old (uncompressed) and new (compressed)
746   backups can be browsed and viewed. Eventually, the old backups will
747   expire and all the pool data will be compressed.  However, until the
748   old backups expire, this approach could require 60% or more additional
749   pool storage space to store both uncompressed and compressed versions
750   of the backup files.
751
752 * Significant improvements to the cgi interface, BackupPC_Admin:
753
754     - much better layout navigation
755     - handles compressed backup files and compressed log files
756     - handles unfilled incremental dumps
757     - better backup directory browsing navigation
758     - reports compression statistics
759     - $Conf{CgiDateFormatMMDD} allows you to set date format (MM/DD or DD/MM)
760     - Additional customization with $Conf{CgiHeaderFontType},
761       $Conf{CgiHeaderFontSize}, $Conf{CgiNavBarBgColor}, and
762       $Conf{CgiHeaderBgColor}.
763
764 * Eliminated BackupPC_queueAll.  BackupPC directly reads the hosts
765   file and queues the PCs itself.  Like config.pl, BackupPC will
766   re-read the hosts file on each wakeup if its modification time
767   changes, or upon a SIGHUP.  This also makes for better behavior
768   when adding a host: if you add hosts, simply send a SIGHUP to
769   BackupPC or wait for the next wakeup.
770
771 * BackupPC_dump now compresses the SmbLOG file if compression is enabled.
772
773 * BackupPC_dump keeps track of compressed file sizes so that compression
774   statistics can be reported by the cgi interface.
775
776 * Aging of old log files now handles compressed log files (.z extension).
777
778 * Added configuration option $Conf{IncrFill} to specify whether
779   incremental dumps should be filled in.  Old behavior was that
780   filling was on.  Now it's optional.  See config.pl for more
781   details.
782
783 * BackupPC_nightly now cleans and generates statistics for both
784   the uncompressed pool and compressed pool (cpool).
785
786 * Added new utility script BackupPC_zcat that can be used to
787   uncompresses BackupPC files.
788
789 * configure.pl offers various options related to compression,
790   depending upon whether this is a new install or upgrade,
791   and whether or not Compress::Zlib is installed.
792
793 * configure.pl now makes a backup copy of config.pl before
794   config.pl is updated.
795
796 * added three new fields to the backups file to handle optional
797   filling and compression stats.
798
799 * Added -e option to BackupPC_dump.  BackupPC now invokes BackupPC_dump -e
800   on each dhcp host once each night to verify that very old backups are
801   expired.  This ensures that very old backups are expired even if
802   the dhcp host has not been on the network for a long time.
803
804 * fixed bug in BackupPC::FileZIO.pm that required Compress::Zlib,
805   even if compression was off.  Thanks to Steve Holmes for reporting
806   this.
807
808 * fixed bug that caused a BackupPC queue to get blocked when a backup
809   cancel attempt was made during the BackupPC_link phase.
810
811 #------------------------------------------------------------------------
812 # Version 1.02, 28 Oct 2001.
813 #------------------------------------------------------------------------
814
815 * Added new script BackupPC_tarExtract to extract the smbclient tar
816   archive. This reduces disk writes by perhaps 90-95% and disk reads by
817   50%. Previously, tar was used to extract and write everything to disk.
818   Then BackupPC_dump would read enough of each file to compute the MD5
819   digest, and then compare the full file with candidate pool files.  So
820   for each 1MB file that matches a single file in the pool, there would
821   be 1MB of disk writes and 2MB of disk reads (to compare two 1MB files).
822
823   BackupPC_tarExtract instead extracts the archive using a 1MB memory
824   buffer.  This allows the MD5 digest to be computed without touching the
825   disk.  Next, any potential pool file compares are done by comparing the
826   pool file against the incoming tar data in memory, which only requires
827   the pool file to be read.  So for each 1MB file that matches a single
828   file in the pool, there are now no disk writes, and only 1MB of reads.
829   BackupPC_tarExtract handles arbitrary size files and repeated
830   potential pool matches.  If the incoming file doesn't match the pool
831   then it is written to disk (once the pool is mature this happens maybe
832   5-10% of the time).
833
834 * Substantial changes to BackupPC_dump:
835
836     + BackupPC_tarExtract is now used in place of tar.
837
838     + BackupPC_dump now reads the output from both smbclient and
839       BackupPC_tarExtract and merges them into SmbLOG.
840
841     + Named pipes are no longer used to connect smbclient to tar
842       (now BackupPC_tarExtract).  Regular pipes are used instead.
843       This avoids the need to system mknod or mkfifo.
844
845     + Locked files on the client that can't be read by smbclient
846       previously were filled with 0x0 bytes by smbclient, meaning
847       tar extracted a useless file filled with 0x0 bytes.  Now,
848       BackupPC_dump watches the output of smbclient and removes
849       any files that smbclient couldn't read.  This avoids storing
850       useless files.  It tries to replace such files with a hard link
851       to a previous dump.  These actions appear in the log file.
852
853 * added new module lib/BackupPC/FileZIO.pm. This handles pool file
854   I/O and is used by BackupPC_tarExtract.  BackupPC::FileIO supports
855   reading and writing compressed and regular files and provides all the
856   hooks for compression support in BackupPC (should be supported in next
857   version). BackupPC::FileIO also does efficient writing of files that
858   contain leading 0x0 bytes (by seeking past the 0x0 bytes). This is
859   helpful when smbclient reads a locked file, and it fills the tar
860   output with a file of the correct size but all 0x0.  Such files will be
861   later removed by BackupPC_dump.  But in the meantime, BackupPC::FileIO
862   writes such files efficiently (as sparse files), meaning just a few
863   blocks of disk space will be needed even if the file is large.
864
865 * alive/dead counting for blackout now works correctly for DHCP hosts.
866
867 * BackupPC resets activeJob on startup, to fix bug when BackupPC was
868   killed and restarted with backups running.
869
870 * added extra non blocking select() in BackupPC to make sure the socket
871   reads don't block.
872
873 * BackupPC avoids queuing multiple BackupPC_queueAll's on the CmdQueue.
874
875 * Updated BackupPC_sendEmail to correctly parse the locked file
876   error from 2.2.1a smbclient, so that missing Outlook file emails
877   can be correctly sent.
878
879 * Changed HostInfoRead() in lib/BackupPC/Lib.pm to lowercase the
880   hostname read from the hosts file.
881
882 * BackupPC_Admin provides general summary when the host name is empty.
883
884 * configure.pl (and BackupPC) now requires perl 5.6.0 or later.
885
886 * configure.pl complains if BackupPC is already running, reminding you
887   to stop it before upgrading.
888
889 * updated documentation, and fixed auto-insertion of config.pl into
890   BackupPC.pod (previously the last config parameter was left out of
891   BackupPC.pod).
892
893 #------------------------------------------------------------------------
894 # Version 1.01, 30 Sep 2001
895 #------------------------------------------------------------------------
896
897 * Documentation cleanup in README, doc/BackupPC.pod, conf/config.pl.
898
899 * BackupPC_sendMail now reads the optional per-PC config file, allowing
900   email configuration parameters to be set on a per-PC basis.
901
902 * Removed the unused 4096-length MD5 digest code in lib/BackupPC/Lib.pm.
903
904 #------------------------------------------------------------------------
905 # Version 1.00, 21 Sep 2001
906 #------------------------------------------------------------------------
907
908 * Initial release of BackupPC on sourceforge.net.