bootstrap: mask more systemd units that fail in containers

well in unprivileged ones, but if one has a privileged CT and really
wants those things, they can just unmask those units..

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

preliminary unprivileged support

just added the more straight-forward things, albeit userid mappings
might mess with file owner in the tar assembled at the end?

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

deprecate old releases

the systemd ones won't work on modern cgroupv2 systems anyway and the
other ones are just ancient.

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

make extracting tar archive for /dev opt-in

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

switch upload dist to bookworm

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bump version to 3.5.0

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

add preliminary support for Ubuntu Lunar 23.04 and Mantic 23.10

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

sort and group use statements

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

d/copyright: update years

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

d/control: document standards conformance with 4.6.2

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

d/control: define compat level via build-depends and raise to 13

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

build: add missing build-dependency

Signed-off-by: Fabian Grünbichler <f.gruenbichler@proxmox.com>

build: fix make test

it should test the local module, not the installed one (the latter also
requires dab to be a build-dependency of itself, which is bad for
bootstrapping).

Signed-off-by: Fabian Grünbichler <f.gruenbichler@proxmox.com>

bump version to 3.4.3

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

allow https mirrors

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

add targetname command

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

constructor: factor out getting the target name

get_target_name will be reused later for adding a dab command to get
the final archive name, to be used for a `make upload` target.

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

zstd: remove original archive after compression like gz

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

debian: future proof mirror selection for trixie and forky

we should get something better to check though, maybe just systemd
support - we got until 2027 to figure that out though.

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

debian bullseye,bookworm: switch apt repos over to deb.debian.org

ftp is a thing of the past and only exists for backward compat, use
the modern CDN backed deb.debian.org directly instead.

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

switch dab method over to modern prototype syntax

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

refactor/cleanup constructor

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bump version to 3.4.2

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

ubuntu: exclude libdrm* and libplymouth* from the base set

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

ubuntu kinetic support

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

php task: restore compat with very old releases using php5 again

note that both, php5 and the affected releases are EOL since years,
but as we do not want to drop the historic releases completely just
yet, restore the task functionality.

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

code style: fix some perl critic errors

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

read_packages: do not be greedy when matching package status value

Else a trailing whitespace is slurped into the $2 value, and that can
trip up users of this data.

Reported in the community forum:
https://forum.proxmox.com/threads/dab-internal-error-at-usr-share-perl5-pve-dab-pm-line-1327.97258/

Commit message copied from previous fix for other RE.

Signed-off-by: Fabian Grünbichler <f.gruenbichler@proxmox.com>

bump version to 3.4.1

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

buildsys: do very basic perl check

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

ubuntu: exclude some more ct-useless packages

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

code cleanups

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

jammy: add future ubuntu 22.04 jammy release

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

devuan: add future daedalus 5.x release

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

avoid big distro codename if clauses, use flags

for now only a systemd flag that defaults to true for all but Devuan,
so set it explicitly to false for older Debian/Ubuntu releases

Could be extended in the future to avoid to much coupling on
codenames/versions.

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bump version to 3.4.0

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bootstrap: do not pull in xbase-clients by default

It depends on x11-apps, x11-session-utils, x11-utils, x11-xkb-utils,
x11-xserver-utils, xauth, xinit which in turn depend on mesa/glx/drm
libraries, all in all accumulating to ~200 MiB of disk space for
stuff that most container applicaitons nowadays won't have any use.

Note that the original reasoning was probably `xauth` for X11 display
redirection, but for that there's a package with the same name that
has a much smaller disk usage footprint overall.

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

tasks: php: default to unversioned metapackage

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

tasks: postgres: default to unversioned metapackage

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

some whitespace/indentation fixes

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

d/copyright: update years

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

dab: update and add to CLI docs

for man page and usage

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bootstrap: extract: support zstd

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bootstrap: extract: make compressor detection generic

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

read installed: include open-error in die message

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

read installed: do not be greedy when matching package status value

Else a trailing whitespace is slurped into the $2 value, and that can
trip up users of this data, e.g., getpkgfile

Reported in the community forum:
https://forum.proxmox.com/threads/dab-internal-error-at-usr-share-perl5-pve-dab-pm-line-1327.97258/

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bootstrap: add simple include/exclude mechanism

Similar to the one from debootstrap, but we do not guarantee 100%
compat.

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

add code cleanup fatal_usage helper

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bump version to 3.3-1

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

add usr-merge and enable it for newer Ubuntu and Debian releases

Hard-code enabling usr-merge for Ubuntu releases equal or newer than
21.x and Debian releases equal or newer than Bullseye (11).

We probably want to add a override to the configuration, for force
enabling or disabling.

For now avoid doing so in Devuan, IIRC they do not want to follow
usr-merge at the moment.

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bootstrap: tar extract: pass "keep-directory-symlink" flag

avoid overriding symlinks, e.g., in a (future) usr-merged system

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

add bookworm + some minor cleanups

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bump version to 3.2-3

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

fix compressor loop-order

commit dbac106eb6e3cff405e57c0bb6a6dbe3cf307c52 introduced a flaw in
the logic - once a file is downloaded the 'last;' statement exited the
inner loop iterating over the compoentens instead of the outer one
iterating over the compressors.

since both do not inherently depend on each other simply swap them.

noticed while trying to build a pmg-template in a clean environment
with full repository configuration (before the tests worked due to
leftover files in the infodir)

Signed-off-by: Stoiko Ivanov <s.ivanov@proxmox.com>

buildsys: change upload dist to bullseye

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bump version to 3.2-2

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

add preliminary support for Ubuntu 21.10 Impish Indri

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

try all available compressors for Packages

Some repositories (e.g. debian-security) only offer .xz compressed
Packages, others (e.g. promox repositories) only .gz compressed ones.

Make the compressors an array and try them in order until successful

Signed-off-by: Stoiko Ivanov <s.ivanov@proxmox.com>

bump version to 3.2-1

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

debian 11: use short ostype

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

zstd: use higher level by default and add a max option

levle 9 is what Arch Linux uses for their packages, so it's a widely
used level which is a good default tradeoff for such images.

Add also zstd-max level, which uses the highest default level which
is still highly efficient on decompression, i.e., while compression
needs more time and resources the decompression doesn't.

Some number for a Debian 11 minimal template from 2021-05-06:

uncomp.    321M    100.0%
gzip       116M     36.1%
zstd  0    106M     33.0%
zstd  9     98M     30.5%
zstd 19     83M     26.8%

So, the still cheap to extract zstd lvl19 need 33M less than the
current default gzip, the access log from our german cdn server show
about 490 successful access to our system images per day, that would
mean that changes saves `490 download/day * 30.4375 days/month * 33M
saved/download` =~ 490 G/month traffic for us and for users.

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

support Devuan 4 and 5

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

add support for Ubuntu 21.04 Hirsute

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bump version to 3.1-3

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

add basic support for Ubuntu 20.10 Groovy Gorilla

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

allow compressing final archive with zstd

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

debian 10 fixup

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

add help and output all available commands

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

mask sys-kernel-config.mount: fails and makes no sense in CT

If it somehow really makes sense a user can just unmask it again,
this is just setting the default, nothing permanent

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

unify similar branch

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

adapt default 'source' repo urls for bullseye

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

handle .xz compressed Packages file from Bullseye

the security one did not have a fallback .gz, so just adapt already.

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bump version to 3.1-2

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

finalize: output also restuling archive size for convenience

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

add support for upcomming Ubuntu 20.04 "Focal Fossa"

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

add experimental support for upcomming Debian Bullseye

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

move supported suites out to hash

hopefully we can extract some features to this hash in the future so
that the other spaghetti code with big if/else chains in the future

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

raise postifx main.cf compatibility_level to 2

otherwise mail received via TCP (localhost port 25) is not accepted, since
there is no default smptd_relay_restriction set, which would make the system an
open relay.

in compatibility_level 2 the default is sensibly set to:
'permit_mynetworks, permit_sasl_authenticated, defer_unauth_destination'

reported via the pve-user list:

https://pve.proxmox.com/pipermail/pve-user/2020-February/171368.html

Signed-off-by: Stoiko Ivanov <s.ivanov@proxmox.com>

support Ubuntu 19.10 Eoan

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

buildsys: switch upload dist over to buster

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bump version to 3.1-1

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

buildsys: improve make clean

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

buildsys: use dpkg-dev makefile helpers for pkg info

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bump version to 3.0-12

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

move from dpkgdeb to buildpackage and add dsc target

can surely be improved, but it's a start

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

add support for Ubuntu 19.04 Disco Dingo

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

add support for Debian 10 Buster

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bump version to 3.0-11

add support for Ubuntu 18.10 (Cosmic Cuttlefish)

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bump version to 3.0-10

add support for ubuntu 18.04 (bionic beaver)

bump version to 3.0-9

use new config properties for sample lxc config

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

correctly check for devuan ascii suite

commit b5583827a5dac915c61fcc539c15b20a380b0b29 introduced
support for Devuan 1 and 2 (ascii), the check for ascii wasn't
correct and thus always evaluated to true.

Reported-by: Joe Burleson [1]
Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>
[1]: https://forum.proxmox.com/threads/dab-version-3-0-8-ubuntu-16-04-issues.42685/

bump version toö 3.0-8

close #1668: add support for devuan jessie and ascii

Use devuan-jessie as suite name to avoid conflict.
Allow both versions for Devuan ascii.

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bump version to 3.0-7

add support for Ubuntu 17.10 (artful)

Signed-off-by: Thomas Lamprecht <t.lamprecht@proxmox.com>

bump version to 3.0-6

closure: fix package ordering

We cannot use perl 'keys', because that return a list with random
order. Some packages use preinst scripts (run at unpack time), so
package order is important.

(cherry picked from commit a922f88f4abeea8ff9d268ea2bd9dcadab9b98e2)