bump proxmox dep to 0.10.7

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

ui: tape/BackupJobs: add CRUD functions

similar to the other jobs grids (add/edit/remove etc.)

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

api2/config/tape_backup_job: enable update api call

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

tape: improve backup task logging

tape: volume-statistics - use format_size to display byte counts

ui: use grid to display tape drivbe status

ui: fix tape volume statistics

ui: use grid to display tape label information

api-viewer: do not show permission for backup/restore protocol

Permission check is done before the H2 upgrade.

ui: tape/ChangerStatus: do not show progress on drive clean

since we have the state in the grid

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: tape/ChangerStatus: do not show progressbar for (un)load

since we already show the state of the drive in the grid, this is
not necessary

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: tape/ChangerStatus: add missing model fields

the DiffStore only updates the fiels given in the model, so we have to
list all the fields we depend on, else we have incomplete data,
e.g. for rendering

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: tape/ChangerStatus: disable drive buttons when it's blocked

if the drive state is not empty, some action blocks it, so we cannot
do any task anyway. Since we now refresh the state every 5 seconds,
we can disable/enable them 'live'.

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: tape/ChangerStatus: convert grid stores to DiffStores

to not deselect items when the store is updated

this makes the ui a bit better to use

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: tape/ChangerStatus: reload changer status (cached) every 5000ms

so that we can have an updated drive status without having to
press 'reload'

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: tape/ChangerStatus: only show loading on 'force refresh'

so that we can update in the background without interfering with the
users workflow

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

docs: fix some typos/grammar

Rund `codespell` tool, but it picked up not as much as I hoped.
Rest was found with vim + (hun)spell

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

doc: fix wrong api method description

api-viewer: show permissions

docs: improve MEDIA_SET_NAMING_TEMPLATE_SCHEMA description

tape: use correct schema for changer path (SCSI_CHANGER_PATH_SCHEMA)

cleanup: cleanup use clause (avoid *)

docs: fix EXPORT_SLOT_LIST_SCHEMA description

api-viewer: fix path for upgraded HTTP/2 proptocls

docgen: improve regex format

docgen: dump string format (property strings)

docgen: improve api schema dump

docs: api-viewer - add backup and restore APIs

.gitignore: do not ingnor .html files - we have some of them in the repository

add missing file docs/api-viewer/index.html

docs: install API viewer

adopt PVEAPI.js for PBS, rename to PBSAPI.js

copy api-viewer from pve-docs

docgen: implement api schema generation (for api-viewer)

Just a start - not complete jet.

tape: extend MediaChange trait to return MtxStatus

tape: update changer status inside ScsiMediaChange implementation

tape: update changer status cache after load/unload

tape: create tmp dirs early at server startup

ui: window/Settings / WebAuthn: add browser setting for userVerificationo

some fido2/webauthn keys can have a pin, and the client can request
a mode for the user verification.

'default' (no value set), lets the browser/device decide if the user has to
enter the pin of the device
'discouraged' requests that the user should not need to enter the pin
'preferred' requests that the user should need to enter the pin (if possible)

since we use webauthn only as a 2nd factor, having the user enter
the device pin on login may seem too much hassle for some users, so
give them the option

since this is a client option anyway, do not save it in the backend, but
in the browser local storage

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: add browser settings window

mostly copied from pve (for now; will refactor when i add it to
pmg too (soon)) without the pve specific features like dashboard
storages

contains some eslint fixes comparing to pves window

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: tape/ChangerStatus: fixup for conditional

the statement !a === "somestring" cannot be true since
!a is either true or false and thus not a string

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: tape: fix eslint warnings (trailing comma)

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

tape: cache changer state

update gitignore

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

ui: tape/ChangerStatus: show the state of the drive

an optimize the columns for smaller layouts (1280 width)
we show either:
* Idle
* spinner + status (if no upid)
* spinner + rendered UPID (clickable, opens task viewer)

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

api2/tape/{backup, restore}, proxmox-tape: set device state

set the drive device state everywhere we lock it, so that we
know what it currently does

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

api2/tape/changer: add drive state to changer status output

if we can find the drive in the config and it has a state

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

api2/tape/drive: wrap some api calls in run_drive_blocking_task

those calls could also block, so we have to run them in a blocking
tokio task, as to not block the current thread

nice side effect is that we now also update the state for that
drive in those instances

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

api2/tape/drive: use run_drive_blocking_task where possible

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

api2/tape/drive: add wrapper for tokio::task::spawn_blocking

similar to the worker wrapper, lock, write status, run code, unset status

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

api2/tape/drive: use 'run_drive_worker' where possible

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

api2/tape/drive: add run_drive_worker wrapper

a wrapper for locking, starting the worker and writing the state

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

tape/drive: add get/set status functions

simply writes into/reads from a file in /run, we will use this
for writing the upid (or potential other states) per drive

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

tape/drive: add test_device_path_lock

this makes it possible to detect if the drive was locked in a
non-blocking manner

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

cleanup: use serde(flatten) for VerificationJobStatus, improve code reuse

cleanup: use serde(flatten) for SyncJobStatus, improve code reuse

ui: cleanup - reuse existing code

ui: tape/BackupJobs.js - render task scheduling status

api: list tape backup jobs with scheduling status

add helper to compute job scheduling state

api: add new type JobScheduleStatus

ui: start tape backup job GUI

ui: tape/ChangerStatus.js - avoid update status in list_media

We do not use the media location, so there is no need to update
the online status in the list_media call. Besides, we already update
the online status when we query the changer/status.

ui: tape/ChangerStatus.js - only update status for selected changer

To reduce load/wait time.

tape: media_list API - allow to update online status for a single changer

ui: tape/TapeInventory.js - avoid update changer status

We do not update changer status by default - only when pressing "Reload" button.

ui: tape/TapeInventory: set defaultValue for pool to ''

otherwise the grouping feature of the grid gets confused as it encounters
undefined values

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: tape/ChangerStatus: adapt load/unload to WorkerTask

those are now workertasks (behind a 'POST' request), so show the
progress with the upid

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: tape/ChangerStatus: rename 'slot' column to 'id'

slot is already in the title of the grid, and hide it by default for
drives (the user does not need it there)

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: tape/ChangerStatus: add Inventory column to drives/import-export

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: improve task description for loat/unload media

update d/control

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

tape: use worker tasks for media load/unload

ui: tape/TapeInventory.js - use grid grouping feature - group by pool

client: extract common functions to proxmox_client_tools module

...including common schemata, connect(), extract_*() and completion
functions.

For later use with proxmox-file-restore binary.

Signed-off-by: Stefan Reiter <s.reiter@proxmox.com>

bump pxar to 0.9.0

Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

asyncify pxar create_archive

...to take advantage of the aio::Encoder from the pxar create.

Rather straightforward conversion, but does require getting rid of
references in the Archiver struct, and thus has to be given the Mutex
for the catalog directly. The callback is boxed.

archive_dir_contents can call itself recursively, and thus needs to
return a boxed future.

Users are adjusted, namely PxarBackupStream is converted to use an
Abortable future instead of a thread so it supports async in its handler
function, and the pxar bin create_archive is converted to an async API
function. One test case is made to just use 'block_on'.

Signed-off-by: Stefan Reiter <s.reiter@proxmox.com>
Signed-off-by: Wolfgang Bumiller <w.bumiller@proxmox.com>

pxar/extract: add extract_sub_dir

to extract some subdirectory of a pxar into a given target
this will be used in the client

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>
Signed-off-by: Stefan Reiter <s.reiter@proxmox.com>

api2/admin/datastore: refactor create_zip into pxar/extract

we will reuse that code in the client, so we need to move it to
where we can access it from the client

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>
[clippy fixes]
Signed-off-by: Stefan Reiter <s.reiter@proxmox.com>

api2/admin/datastore: accept "/" as path for root

makes more sense than sending "root'"

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>
Signed-off-by: Stefan Reiter <s.reiter@proxmox.com>

api2/admin/datastore: refactor list_dir_content in catalog_reader

we will reuse that later in the client, so we need it somewhere
we can use from there

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>
[add strongly typed ArchiveEntry and put api code into helpers.rs]
Signed-off-by: Stefan Reiter <s.reiter@proxmox.com>

client: add VsockClient to connect to virtio-vsock VMs

Currently useful only for single file restore, but kept generic enough
to use any compatible API endpoint over a virtio-vsock[0,1] interface.

VsockClient is adapted and slimmed down from HttpClient.

A tower-compatible VsockConnector is implemented, using a wrapped
UnixStream as transfer. The UnixStream has to be wrapped in a custom
struct to implement 'Connection', Async{Read,Write} are simply forwarded
directly to the underlying stream.

[0] https://www.man7.org/linux/man-pages/man7/vsock.7.html
[1] https://wiki.qemu.org/Features/VirtioVsock

Signed-off-by: Stefan Reiter <s.reiter@proxmox.com>

rest: implement tower service for UnixStream

This allows anything that can be represented as a UnixStream to be used
as transport for an API server (e.g. virtio sockets).

A tower service expects an IP address as it's peer, which we can't
reliably provide for unix socket based transports, so just fake one.

Signed-off-by: Stefan Reiter <s.reiter@proxmox.com>

tape: add regression test for compute_media_state

ui: tape/BackupOverview: insert the tapes between media-set and snapshot

but auto-expand them, so no additional click is necessary

this shows the user which tapes are involved for the media sets

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: css: remove vertical align for pbs-tape-icon

and combine the unnecessary duplicate definition

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: tape: improve tape-erase and add it to library view

refactor erase window, limit drives to changer if given

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

tape: erase_media - automatically load media (with tape libraries).

ui: tape/BackupOverview: show mediaset loading error in msg box instead

if a catalog is missing (or the loading otherwise throws an error), show
the error message in a msg box instead of a mask. this way a user can
still navigate the tree

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: tape/TapeInventory: add erase button

to erase the selected tape

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

api2/tape/drive: add optional label-text to erase

if given, erases the tape only iff the inserted tape contains that label
used to safeguard tape erasing from ui for standalone drives

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

tape: add regression test for alloc_writable_media

ui: tape/TapeManagement: change Text of Backup/Tape Inventory

to 'Content' and 'Inventory' respectively

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: tape/TapeInventory: add 'Add Tape' button

by adapting and reusing the 'LabelMedia' window

shows a short notice about inserting the correct tape in the drive
and now allows to select a drive

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: tape/TapeInventory: change to regular store

listing the media can potentially hang (changer status), so do not
reload in the background, only on activate

also increase the timeout to 5 minutes and add a reload button

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: tape/ChangerStatus: use whole drives grid for masking on unload

instead of just the tableview

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

ui: tape/ChangerStatus: increase timeout for api calls

since tape commands can take a while and we do not want to change
all of those to worker tasks, increase the timeout to 5 minutes

Signed-off-by: Dominik Csapak <d.csapak@proxmox.com>

tape: ui - avoid changer status query in backup content panel

tape: implement API to run tape backup jobs

cleanup: tape_backup_job.rs - do not use #[allow(non_camel_case_types)]