backup/datastore.rs: try to create useful directory layout

store/type/ID/TIME/xxx.yyy

cleanup nodename()

tools.rs: new helper nodename()

api3/admin/datastore.rs: rename parameter "name" to "store"

bin/proxmox-backup-client.rs: implement file name completions - first try ...

api3/admin/datastore/upload_catar.rs: verify content type ("application/x-proxmox-backup-catar")

client/catar_backup_stream.rs: remove debug code

tools.rs: new helper required_string_param()

To extract parameters from Value.

api/router.rs: return Result in upload handler

proxmox-backup-client: implement upload to server

client/http_client.rs: new helper class

api3/admin/datastore.rs: change api patch for upload_catar

upload: don't return NotReady

We need to kick (poll) the stream's next element, so simply
reiterate, the try_read!() will then return NotReady from
the next stream item for us.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

cleanup previous commit...

This kind of notation is weird...

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

listen on :: instead of 0.0.0.0

Since this supports both ipv6 & ipv4 unless v6only is
explicitly enabled.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

server/rest.rs: correctly pass query/url parameters

reduce compiler warnings

client/catar_backup_stream.rs: new helper for catar uploads to server

backup/datastore.rs: use Arc for chunk_store references

api3/admin/datastore/upload_catar.rs: implement upload future

api/router.rs: allow different types of api methods

Added a prototype for file/backup uploads.

catar: define all feature flags

catar/encoder.rs: allow to pass list of devices

We can use this to implement the --one-file-system like options. This
is a bit more convenient, because this way we can select to include
multiple devices (which is required by container backups).

catar/encoder.rs: disable backup of virtual file systems

catar/encoder.rs: only test fat attribute on MSDOS and FUSE file systems

/catar/encoder.rs: do not store data from virtual file systems

catar/encoder.rs: add helpers to test file system type

catar/encoder.rs: pass magic fs number to encode_dir

catar/encoder.rs: use O_DIRECTORY to open dirs

catar: encode/decode sockets and fifos

catar/decoder.rs: corrently pass mode to mknodat

catar: encode/decode devices

catar/format_definition.rs: add more feature flags

catar/encoder.rs: store fat file system attributes

catar/encoder.rs: cleanups

catar/encoder.rs: encode linux fs attributes, cleanup encoder

Try to avoid duplicate stat calls (assume file tree is stable during backup).

avoid compiler warnings

backup/archive_index.rs: correctly check for errors

catar/decoder.rs: restore mode, uid, gid and mtime

catar/decoder.rs: avoid slashes in file names

catar/decoder.rs: impl restore dirs, files, and symlinks

rest: rename utf-8-checked 'bytes' to 'utf8'

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

rest: don't copy the body

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tools/timer: fixup doc formatting

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

Cargo.toml: [lib] has no authors/version

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

catar/decoder.rs: restore_sequential - read payload

catar/decoder.rs: improve restore_sequential

catar/decoder.rs: start implementing sequential decoder, cleanups

And use [derive(Endian)] for endian conversion.

depend on endian_trait

catar: implement create

bin/catar.rs: add list command

catar/decoder.rs: start implementation

format_definition.rs: remove wrong docs

impl Read for BufferedArchiveReader

impl Seek for BufferedArchiveReader

buffered_read: return empty buffer on eof

define and use BufferedReader trait

remove dead code

tools.rs: improve docs

backup/archive_index.rs: implement BufferedArchiveReader

Implement relativly fast random read using binary search.

backup/chunk_store.rs: resize buffer by powers of two

catar/encoder.rs: code cleanup

Note: Rust Vec resize uses len(), not capacity()!

backup/chunk_store.rs: avoid allocation in read_chunk

white space cleanups

backup/chunk_store.rs: implement read_chunk()

proxmox-backup-manager: add garbage collection cli

fix bash completion binary names

cleanup crate names

rename backup-client to proxmox-backup-client

rename pbs to proxmox-backup-manager

backup/chunk_store.rs: only use one directory level

move admin API to /admin/ subfolder

backup/archive_index.rs: pass correct size to unmap

backup/image_index.rs: use little endian

cli::command: wrap usage errors in a UsageError

So we can distinguish them and show usage output
conditionally.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

catar/encoder.rs: make sure we write all data with write_all()

chunker.rs: make sure chunk_size_avg is a power of two

improve chunker speed (avoid modulo)

add benchmark for chunker

We get about 300MB/s - so this is still not fast enough

Note: This is quite slow with debug target, so please compile with --release

image_index.rs: verify file size

implement garbage collection for .aidx files

image_index.rs: verify header magic/version

fix typo

disable debug code

archive_index.rs: correctly write .aidx file

image_index.rs: print stats

src/backup/archive_index.rs: use close() instead of flush()

Also pass a reference to the encoder.

src/backup/archive_index.rs: implement flush()

src/backup/archive_index.rs: first try

create backup mod in backup.rs, improve docu

move chunker.rs to backup/

rc/catar/chunker.rs: first try

avoid compiler warnings

add another catart test

add catart test for goodbye table ordering

src/catar/encoder.rs: correctly sort goodbye items by hash key

new catar binary

currently used for debugging

fix doc syntax

catar cleanups ...

binary_search_tree.rs: fix docs