src/bin/proxmox-backup-client.rs: implement chunk-size completion

src/bin/proxmox-backup-client.rs: cleanup

src/bin/proxmox-backup-client.rs: implement completion for backup groups

src/client/backup_repo.rs: implement FromStr trait

src/client/backup_repo.rs: implement Display trait

src/bin/proxmox-backup-client.rs: implement repository completions

src/bin/proxmox-backup-client.rs: fix BACKUPSPEC_REGEX - correctly specify non-capture group

And improve bash completion.

src/cli/command.rs: fix completion - never display argument parameters as option

src/cli/command.rs: pass parsed parameters to completion function

src/cli/getopts.rs: factor out reusable code

src/cli/command.rs: use a HashMap to store fixed param as key/value pairs

src/cli/command.rs: improve completions

signalfd cleanup

- add comment about the boxed file descriptor (and others)
- reexport SigSet and Signal for convenience
- remove Result wrapper (only used once)
- enforce drop order of the PollEvented2 struct with respect
  to the boxed fd

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

add missing mio crate for signalfd

This is what actually provides EventedFd used by tokio.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tools: add async signalfd handler

This provides a Stream<Item = siginfo> via nix' signalfd,
by wrapping it in tokio's PollEvented2 struct to allow
polling via tokio's event loop.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

src/catar/decoder.rs: simplify public restore API

src/bin/proxmox-backup-client.rs: strip .didx file extensions

src/bin/proxmox-backup-client.rs: include file extension in backupspec

src/catar/decoder.rs: cleanup style

src/catar/decoder.rs: dir_mkdirat - add create_new flag

src/catar/decoder.rs: implement real sequential decoder (no Seek)

I copied the old code to src/catar/inspector.rs. Will modify
that later to implement a random access decoder ...

src/bin/proxmox-backup-client.rs: impl option all-file-systems

move chunker into proxmox_protocol

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

src/bin/catar.rs: implement all-file-systems option

src/catar/encoder.rs: log skipped mount points

src/catar/encoder.rs: remove debug output

src/bin/catar.rs: implement verbose flags

src/catar/encoder.rs: use simply flag "all_file_systems"

protocol: use size_t for c api instead of ulong

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

protocol: expose chunker and digest function

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

protocol: allow explicitly polling for a single packet

When using *blocking* I/O wait_for_* functions need to be
able to not read past their awaited packet.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

protocol: also build a cdylib

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

protocol: remove redundant WouldBlock handling

The packet reading code already translates this to a bool.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

Makefile: copy zstd-sys into build

depend on zstd 1.3.8

On debiln  stretch, you need to install that from debian backuports ...

cargo: patch zstd-sys to use system library

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

Revert "TEMP: dynamically link against liblz4 for testing"

This reverts commit dc04ce7fe5f61095b6c67addcdd35524baaf274b.

src/cli/command.rs: print_bash_completion - avoid crash

src/backup/chunk_store.rs: use zstd compression insteadf of lz4

Provides better compressionm rate, and is still fast.

src/backup/chunk_store.rs: read_chunk - clear buffer before calling read_to_end

TEMP: dynamically link against liblz4 for testing

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

src/bin/proxmox-backup-client.rs: correctly strip file extension

src/bin/proxmox-backup-client.rs: impl restore

src/api2/admin/datastore.rs: impl list_snapshot_files

src/backup/backup_info.rs: new helper to list files

src/api2/admin/datastore/catar.rs: use archive_name directly

src/client/http_client.rs: impl download

buildsys: copy proxmox-protocol to build/

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

add protocol test client

This uses futures for everything which is mostly useful as a
test to see if the protocol crate's non-blocking I/O support
can handle it...

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

api2/admin/datastore: add a backup protocol test api path

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

import proxmox-protocol crate

This is supposed to contain only the parts necessary to
communicate with the server via the proxmox backup protocol.
(Including the chunker, which is currently `include!()`d
from the main crate.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

fixed_index: split add_chunk/add_digest

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

fixed_index: impl Send for FixedIndexWriter

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

backup/datastore: expose insert_chunk method

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

router: add upgrade method

This is just an Async GET method, but semantically
different, so it gets its own router method.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

src/bin/proxmox-backup-client.rs: sort list results

src/bin/proxmox-backup-client.rs: allow to set backup-id

src/client/http_client.rs: remove debug statement

docs: remove generated-index.rst and  search-page.rst

This does not work as expected.

docs: add manual page for proxmox-backup-proxy

docs: define author and version inside epilog.rst

src/client/http_client.rs: store/load ticket in xdg runtime dir, depend on crate xdg

src/api2/access.rs: authenticate_user() - add ticket login

src/tools/ticket.rs: define const TICKET_LIFETIME

src/tools.rs: impl file_get_json()

backup_info: BackupDir shortcut

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

backup_info: use two independent Into<String> types

there's no reason to force them to be the same input type

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

src/bin/proxmox-backup-client.rs: print backup duration

src/backup/backup_info.rs: improve docs

src/backup/backup_info.rs: move code into separate file

Also changed create_backup_dir() parameters - uses &BackupDir now.

src/backup/datastore.rs: add helper to sort backup lists

src/backup/datastore.rs: use unix epoch to create DateTime

To make sure that we have a timestamp without nanosecond.

src/backup/datastore.rs: use new() function to create structs

src/backup/datastore.rs: protect BackupDir fields, impl new()

src/backup/datastore.rs: protect BackupGroup fields, impl new()

src/bin/proxmox-backup-client.rs: simply log to stdout

src/backup/datastore.rs: make sure timestamp does not contains nanoseconds

Because we want simple, readable file names.

src/catar/encoder.rs: add verbose flags

src/catar/encoder.rs: skip RAMFS

unless explicitly selected.

src/bin/proxmox-backup-client.rs: rename create into backup

src/api2/admin/datastore.rs: imp delete_snapshot

avoid compiler warning

catar api: cleanup parameter names

src/bin/proxmox-backup-client.rs: use new json_object_to_query

src/tools.rs: new helper json_object_to_query

docs: add support link

docs: add "What is Proxmox Backup"

docs: improve section "Why Backup"

docs: add more features

parameter name cleanups (use '-' instead of '_')

src/api2/admin/datastore.rs: rename get_group_list to list_groups, cleanups

src/api2/admin/datastore.rs: impl list_snapshots

src/tools.rs: add simply string join

src/api2/admin/datastore.rs: impl list_backup_groups

docs: add epilog.rst to define common things.

src/backup/datastore.rs: use timestamp with zone offset

src/backup/datastore.rs: split BackupDir

src/backup/datastore.rs: split BackupInfo

backup/index: remove IndexIterator

removed the need for it, to avoid copies

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

src/bin/proxmox-backup-client.rs: generate a log file