src/bin/proxmox-backup-client.rs - garbage-collection: display task log

src/bin/proxmox-backup-client.rs: impl. and use complete_pxar_archive_name

src/bin/proxmox-backup-client.rs: impl. catalog sub command

catalog dump
catalog shell

src/client/task_log.rs: move display_task_log into extra file

src/api2/admin/datastore.rs: remove test_prune, add dry-run to normal prune

And use display_task_log on the client side.

src/bin/proxmox-backup-client.r - display_task_log: use string range instead of as_bytes

src/bin/proxmox-backup-client.r - display_task_log: add new strip_date parameter

src/bin/proxmox-backup-client.rs: new display task log helper

New helper to display worker task logs. Use it for prune (experimental).

src/server/formatter.rs: impl. new result attribute "active"

src/backup/prune.rs: implement --keep-hourly

docs/administration-guide.rst: add hint about ISO week date

src/backup/prune.rs: prune - correctly use iso_week year

docs/administration-guide.rst: doc prune --dry-run

pxar: fuse: add support for list- and getxattr

Signed-off-by: Christian Ebner <c.ebner@proxmox.com>

pxar: fuse: cache goodbye table for each directory on opendir and release it on releasedir

Cache not only the goodbye table for the last directory but for each opened
directory.
The opendir fuse callback will fill the cache with the goodbye table and
releasedir will remove it from the cache.
This should reduce the number of chuncks fetched from the server in some cases.

Signed-off-by: Christian Ebner <c.ebner@proxmox.com>

pxar: fuse: use binary search instead of linear search in goodbye table.

The goodbye table is layed out as binary search tree based on the hash, so use
this to be more efficient when looking up a hash in the table for directories
with a large number of entries.

Signed-off-by: Christian Ebner <c.ebner@proxmox.com>

docs/command-syntax.rst: include catalog-shell-synopsis.rst

src/bin/proxmox-backup-client.rs: white space cleanup

src/bin/proxmox-backup-client.rs: implement prune --dry-run

src/api2/admin/datastore.rs: add new api test_prune()

src/api2/admin/datastore.rs: cleanup - move schema defininition in front of rust method

src/api2/admin/datastore.rs: remove prune parameters from status call

Not idea why they are added there.

src/backup/prune.rs: add new helper keeps_something()

proxmox-backup-client/man1.rst: include catalog shell commands

src/bin/dump-catalog-shell-cli.rs: generate catalog shell docs

rename catalog_shell_api() into catalog_shell_cli()

src/backup/catalog_shell.rs: factor out catalog_shell_api()

In order to extract documentation ...

debian/control: remove libreadline-dev build dependency

Signed-off-by: Christian Ebner <c.ebner@proxmox.com>

src/backup/readline.rs: removed in favor of new readline impl

Signed-off-by: Christian Ebner <c.ebner@proxmox.com>

src/backup/catalog_shell.rs: adapt to use API Schema definition and rustyline

This major refactoring of the catalog based shell utilizes the new API macro and
the API Schema as well as rustyline instead of the old GNU readline C API.

The code now has these 3 main components:
 * The `Shell` which handles the readline loop via rustyline.
 * The shell functions defined via the API macro.
 * The `Context` which holds catalog and decoder instances.

Signed-off-by: Christian Ebner <c.ebner@proxmox.com>

src/backup/prune.rs: define new struct PruneOptions

src/backup/backup_info.rs: remove old prune code

src/backup/prune.rs: add PruneMark::KeepPartial

Use separate mark for partial backup - dont mess them up with regular ones.

src/backup/prune.rs: factor out code into remove_incomplete_snapshots()

src/backup/prune.rs: moved prune related code into extra file

tests/prune.rs: add more tests

src/backup/backup_info.rs - prune: improve algorythm

tests/prune_data: removed, build list manually

src/api2/admin/datastore.rs - prune: log info about all snapshots

docs/administration-guide.rst: explain how prune handles uncomplete backups

src/backup/backup_info.rs - compute_prune_list: remove unfinished backups

tests/prune_data: create test data for regression tests

docs/administration-guide.rst: improve prune docs

src/backup/backup_info.rs: improve prune algorithm

tests/prune.rs: regression tests fro prune

src/backup/backup_info.rs: new compute_prune_list helper

So that we can write regression tests for this.

Revert "test another api macro use"

This reverts commit a9aa52e6a8aea4fb6db05ce697df684583f3e065.

Because we do not want to use macros for the backup protocol for now.

And because it crashes backup tasks for some unknown reason.

docs/administration-guide.rst: add prune docs

docs/administration-guide.rst: describe login/logout

src/api2/admin/datastore.rs - read_backup_index: add manifest with size

So that the client can display the size of the index file.

docs/administration-guide.rst: minor cleanups

docs/Makefile: remove paper settings (we set that in conf.py)

docs/administration-guide.rst: explain restore

docs/administration-guide.rst: add encryption section

test another api macro use

The api macro now supports hyphens in parameter names and
referencing externally defined `Schema`s, so here's an
example.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

pxar: decoder: fix incorrect read for hardlinks.

Decoders read must check if the file is a hardlink and read data from the
corresponding offset if so.

Signed-off-by: Christian Ebner <c.ebner@proxmox.com>

pxar: decoder: return original name in attributes()

The returned filename should be the one of the file given at the offset, not of
the one the hardlink points to.

Signed-off-by: Christian Ebner <c.ebner@proxmox.com>

docs/administration-guide.rst: improve section "Creating Backups"

correctly install bash completion helpers

docs/administration-guide.rst: improve section "Backup Content"

docs/installation.rst: replace FIXME with todo items

docs/introduction.rst: improve "Why Backup" section.

use cli from proxmox::api

src/cli/completion.rs - get_help_completion: fix for "help -" expansion

src/bin/completion.rs: add echo command

src/bin/completion.rs: use api macros

src/cli/command.rs: use insert_help()

src/cli/command.rs: cleanup, remove unused top_def parameter

src/cli/completion.rs - get_simple_completion: remove all_arg_param parameters

Seems useless.

src/cli: improve docs

src/cli/command.rs: make set_help_context private - no need to expose

src/cli/command.rs: improve help command description

src/cli/completion.rs: moved all completion related code here

src/cli/readline.rs: moved readline related code here

src/cli/shellword.rs: moved shellword related code into this file

src/cli/command.rs - get_nested_completion: allow fuzzy match

src/cli/command.rs - get_nested_completion: return nothing if first argument does not match

src/cli/command.rs: improve get_help_completion

tests/verify-api.rs: remove unused use clause

src/cli/command.rs: handle multilevel sub commands in help

src/cli/command.rs: fix help completions

src/bin/completion.rs: add history support

src/cli/command.rs - handle_command: return Result instead of exit()

src/cli.rs: add insert_help() method

src/cli/command.rs: implement help

cli/completion: use match statements and .contains()

`match` is a bit more readable than the if-else chains,
also replace
    space_chars.iter().any(|s| c == *s)
with
    space_chars.contains(&c)
which is also more readable.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

remove shellwords crate

use rustyline to replace readline

whitespace fixup

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

update api macro example usage

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

src/cli/command.rs: cleanup, make handlers more generic

update api macro invocation to new style

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

catalog_shell: fix several clippy warnings

Signed-off-by: Christian Ebner <c.ebner@proxmox.com>

first api macro usage test/example

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

catalog_shell: major refactoring of cli command definition and parsing

By changing the way shell commands are defined and parsed, this makes it more
straight forward to extend the current functionality.
The readline input is parsed based on the provided command definition and the
given parameters and options are passed to a command specific callback function.
In addition, the provided command definition including its description is used
to generate a help string to display.
The help command shows a list of all supported commands or the help string for
the provided command.

Signed-off-by: Christian Ebner <c.ebner@proxmox.com>

catalog_shell: check and return on empty list in order to avoid division by zero

Signed-off-by: Christian Ebner <c.ebner@proxmox.com>

catalog_shell: do not restore full archive if no entries are selected for restore-selected

Signed-off-by: Christian Ebner <c.ebner@proxmox.com>

src/cli/format.rs: move doc generation code into extra file

src/pxar/fuse.rs: add impl Context

src/pxar/fuse.rs: move init and destroy into Session