fix configuration dir permission

Carefully set and check permissions ...

config/datastore.rs: remove unused code

config/datastore.rs: return empty config if file does not exist

tools::file_get_contents - improve error message

tools::file_read_firstline - improve error message

change proxy user from www-data to backup

tools.rs: new helper to get uid/gid for the sepcified system user.

Or is there an easier way to get that info?

backup/datastore.rs: improve error reporting

section_config.rs: simplify parser by using new try_block macro

tools.rs: fix doc tests

tools.rs: document try_block macro

tools.rs: new try_block macro

update to pam 0.7 (renamed from pam-auth)

It now supports custom conversation methods, so instead of
new() we ask for a default authenticator taking a password
via with_password(). Since the password is now handled by
the now separate conversation handler, `set_credentials()`
is now called on the handler we get via `.get_handler()`.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

server/rest.rs: add method to log message

api2/admin/datastore/catar.rs: simplify/fix debug message

server/rest.rs: log full error messages

server/rest.rs: use a protocol extension to avoid double log

Instead of modifying the response header itself.

avoid double logging of proxied requests

Revert "backup/datastore: fn open is a private implementation detail"

This reverts commit 3dacd9a660696c5b9571d50e4603ed222ecdc634.

I currently use this in some test ...

src/server/rest.rs: log failed requests

tools/fs: mark ReadDir as Send

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

backup/chunk_store: verify chunk file names

get_chunk_iterator() should skip over files which aren't an
actual chunk

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

backup/datastore: fn open is a private implementation detail

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

backup/chunk_store: open base dir in get_chunk_iterator

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

src/client/backup_repo.rs -  improve docu

src/client.rs: improve library structure and docu

make: use --no-deps for cargo doc

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tools/timer: add module documentation

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

backup: replace ChunkIterator

Instead we just build the iterator using our
tools::fs::read_subdir iterator as follows:
Use the index range (0..0x10000) as an iterator, map() it
to yield a subdirectory iterator for each index, then
flatten it.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tools: use scan_subdir iterator for scandir

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tools/fs: add file_name_utf8_unchecked shortcut

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tools/fs: change scan_subdir to use filter_file_name_regex

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tools/fs: add filter_file_name_regex to FileIterOps

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tools/fs: add FileIterOps trait and FileTypeFilter

FileIterOps will provide operations on file entry iterators.
For now this provides a file type filter.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tools/fs: let ReadDir iterator yield ReadDirEntry

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tools/fs: add ReadDirEntry helper

This wraps nix::dir::Entry with the parent and additionally
exposes the parent directory file descriptor since we need
it to perform openat().

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tools/fs: add scan_subdir helper

This filters the results of read_subdir with a regex.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tools: start fs submodule, add read_subdir

This creates an iterator relative to a RawFd via
nix::dir::Dir over nix::dir::Entrys.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

src/client/http_client.rs: try to login

use an environment var to store passphrase (PBS_PASSWORD)

src/bin/proxmox-backup-client.rs: define and use BackupRepository

client: use hyper-tls for now

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tools: borrow: implement Deref for Tied

Eg. if you have an x: Tied<Dir, Iterator> now you can simply
call x.next() as it'll dereference to the Iterator.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

api2/admin/datastore/catar.rs: use nested file extensions

i.e. archive.catar.didx

simplify backup lib structure (pub use xxx:*), improve doc

src/backup.rs - improve doc

rename ArchiveIndex to DynamicIndex

also changed the file extension from .aidx to .didx

rename ImageIndex to FixedIndex

also changed the file extension fron .iidx to .fidx

backup: fixup warnings and readd lost file type check

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

backup: cleanup long lines

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

backup: use ChunkIterator for sweep_unused_chunks

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

backup: add optional progress callback to ChunkIterator

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

backup: add ChunkIterator

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tools: add Tied value

Tie two dependent values together, such as a nix::Dir with
its nix::dir::Iter<'a> where 'a is tied to the Dir's
lifetime, making it otherwise impossible to return them or
store them in a struct.

Alternatively we could try the 'rental' crate.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

bin: manager: fixup datastore parameter name

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

avoid compiler warning

bin/proxmox-backup-api.rs: improve error handling

bin/proxmox-backup-proxy.rs: improve error handling

access: use proxmox-backup-auth for pam

allows customization via /etc/pam.d/proxmox-backup-auth

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

add generated files to .gitignore

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

api2: time: use /etc/localtime as fallback

in case there is no /etc/timezone

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tools: use std::fs::read for file_get_contents

Until we add the extra options like we have in pve, just use
the already existing (since 1.26) shortcut.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

remove some rather inconvenient debug output

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

proxy: use <configdir>/server.pfx for tls

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

introduce buildcfg module and PROXMOX_CONFIGDIR

buildcfg.rs should contain convenience variables or macros
for using build-time configured variables

For now we replace hardcoded "/etc/proxmox-backup/<foo>"
with configdir!("<foo>").

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

proxy: use TLS via tokio-tls

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

buildsys: don't cache non-binary data

etc/ and www/ should be clean in the build/ dir

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

etc: remove obsolete syslog.target dependency

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

make deb: use --no-pre-clean

We create a clean build/ directory anyway.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

make clean: cleanup source package files

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

debian: add debian/source/format file

We need 1.0: We have a native package with a revision, so
anything >1.0 doesn't work...

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

add missing build depends

lintian complains about a missing bash-completion dependency
which is implied required the bash completion debhelper...

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

buildsys: re-enable build caching for deb target

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

make: add dsc target and use lintian

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

use libexecdir for service binaries

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

use BUILD_MODE via the environment

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

also apply cargo build flags to tests

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

buildsys: fixup package building

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

ignore casync test by default

because there's no casync package we can build-depend on to
actually run the tests on normal systems...

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tests: chunk_store: cleanup .testdir

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tests: import lazy_static as needed

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

don't hardcode /usr/share paths

Add a defines.mk file defining the standard default layout
for installation (PREFIX, DATAROOTDIR, LIBDIR etc.).

Add a $(JSDIR) variable and use env!("JSDIR") in place of
the hardcoded /usr/share/javascript/proxmox-backup path.

Have defines.mk include an *optional* local.mak to override
JSDIR to www/ during local development.

Add `make install` targets and remove debian/install.

Note that service files are now in $libdir/proxmox-backup/
as there's usually no point in starting them from the
command line, so /usr/sbin makes no sense.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

www: build proxmox-backup-gui.js into the js/ subdir

The server expects an images/ subdir and a js/ subdir, so we
should also compile our files using the same structure.

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

remove useless command option from daemons

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

add missing build dependencies

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

improve ApiMethod docu

implement relead_timezone flag

depend on pam-auth, use pam for root login

Please use username "root@pam" for login via GUI.

delay unauthorized request (rate limit)

move http error class to router.rs

server/rest.rs: verify auth cookie

Utils.js: fix cookie handling

Use unsecure cookie foör testing.

avoid compiler warnings

api2/access.rs: add ticket api

fix timer_delete call

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

auth_helpers.rs: add timestamp to csrf token

auth_helpers.rs: implement assemble_csrf_prevention_token

load auth keys on startup

auth_helpers.rs: split code into separate file

bin/proxmox-backup-api.rs: gererate secret for csrf token

tools/ticket.rs: remove debug statements