dfu: Clear the buffer before getting the status

This makes emulation of DFU devices work as the control transfer data is then
predictable.

trivial: Enable USB debugging when backend debugging is enabled

trivial: Use new API in libgusb to better detect USB replug

Add API to wait for a device

This allows us to ignore all the delays when the device is emulated, with the
idea being to do dozens of device emulations in the CI tests.

Also, do not call fu_progress_sleep() when the device is emulated.

Do not invalidate the probe for emulated devices

If the device does not replug, and we change the GUsbDevice because the phase
changed we don't want reprobe the hardware.

If we reprobe then the emulated device will request extra data compared to the
real device, which will cause emulation to fail.

trivial: Require --force to overwrite files with 'fwupdmgr download'

Return an error when the pending db could not be updated

build(deps): bump docker/build-push-action from 3 to 4

Bumps [docker/build-push-action](https://github.com/docker/build-push-action) from 3 to 4.
- [Release notes](https://github.com/docker/build-push-action/releases)
- [Commits](https://github.com/docker/build-push-action/compare/v3...v4)

---
updated-dependencies:
- dependency-name: docker/build-push-action
  dependency-type: direct:production
  update-type: version-update:semver-major
...

Signed-off-by: dependabot[bot] <support@github.com>

trivial: Do not hardcode fwupdmgr as a binary name

trivial: Record the install phase for future functionality

trivial: Do not inherit history from emulated devices

trivial: Remove some dead comments left in after debugging

Use indexes when building the quirk prepared queries

This can save 250us on each query (of which we do a *lot*), and reduces the
number of queries by about half if the user is using a libxmlb version that can
convert from `_BOUND_TEXT` to `_BOUND_INDEX_TEXT`.

The more devices detected, the bigger the difference, and without this patch
fixing libxmlb would break fwupd as we'e been searching with an index, but not
actually providing one.

trivial: Add FuProgress to fu_context_load_hwinfo()

TIL: fu_bios_settings_setup() takes over 50ms (10%!) at startup.

trivial: Remove duplicate call to fu_engine_ensure_device_supported()

This is moderately expensive to call as it processes each requirement on each
release on each device, so the last thing we want to do is call it *twice*.

trivial: Update all fixes using markdownlint

trivial: Update all fixes using codespell

Use a more compact JSON format using precommit

Remove unused API for setting backend tags

It turns out we do not want to know the current phase of the device, and we can
achieve the same thing tagging the GUsbDevice manually and clearing the events
at exactly the correct time.

ti-tps6598x: Assign the DMC as the proxy rather than just the parent

We 'write through' the parent, and by telling fwupd this we can make better
decisions when emulating.

Copy some flags from the proxy to the logical device

trivial: update fwupd-efi to 1.4

fwupd-efi 1.4 enforces that NX bit is set by default.
This won't affect most users, it should only affect those that compile
by hand and don't have fwupd-efi installed already.

trivial: Do not ask for polkit auth if the device is emulated

trivial: Do not wait for the acquiesce delay if emulated

Propagate device tag to parent device

trivial: Correctly compress zip files in FuArchive

Ensure the new GUsbDevice is assigned in subclasses of FuUsbDevice

Re-incorporate the emulated USB devices when the backend device changes.

trivial: Fix critical warning in future code

Both types need to be FuUdevDevice to compare the sysfs paths.

Do not return emulated devices from GetHistory

trivial: Add fu_device_has_problem() to be consistent and hide details

Remove duplicate calls to fu_device_list_wait_for_replug()

The fu_engine_get_device() function is called at the start of each phase,
which calls fu_device_list_wait_for_replug() a second time.

Duplicate calls are at best confusing, and at worst could cause a 'device
failed to come back' failure.

Add a device problem for 'update-in-progress'

We already had this as an inhibit, but this was not translated client-side.

We also need to propagate the problem to the bootloader device if the device
replugs during firmware update.

colorhug: Show the flash success value in debugging

Add python3-pefile/python-pefile to CI build deps

This is so that it can be used by subproject fwupd-efi

Fix hotplug events when emulating devices

modem-manager: remove improper use of assert

FuSaharaLoader being NULL is normal for devices that only
support Firehose and don't use Sahara QDL port.

wacom-usb: Retry set_report on failure

Sometimes the flash process will randomly hang and time-out when sending
data to the device. We currently do not use any retry logic, so if this
happens the flash attempt is treated as a failure. This can be a source
of worry or frustration, especially if subsequent manual retries fail
in a similar way.

Adding FU_HID_DEVICE_FLAG_RETRY_FAILURE to the list of flags used when
calling fu_hid_device_set_report allows fwupd to try sending a block
multiple times if such a time-out (or other error) occurs. This makes
the flash process less prone to failure.

Signed-off-by: Jason Gerecke <jason.gerecke@wacom.com>

trivial: Fix tests to include 'emulated'

Add fu_device_remove_backend_tag() for future use

trivial: Proxy the _SAVE_EVENTS flag even if set at runtime

Use the new GUsb API for loading by tag

Based on a patch by frederic.danis@collabora.com, many thanks.

Do not make any of the HWIDs setup failures fatal

It's perfectly okay to have no HWIDs defined.

Should help with https://github.com/fwupd/fwupd/issues/5402

trivial: Add a device flag specifying it is emulated

trivial: Fix fuzzing with libxmlb from main, harder

trivial: Force enums to be uint64, harder

trivial: Fix fuzzing with libxmlb from main

Save all the FwupdDeviceFlags in the pending database

Force the compiler to treat them as uint64_t so that bitwise operations work.
At the moment flags greater than 1<<32 are just being silently ignored...

Support unsetting specific device flags

This makes it possible to 'undo' the notification, for example.

trivial: Fix build fix when using ppc64le system

trivial: Use %autochangelog in reference spec file

Allow desktop software to inhibit the system to prevent all  updates

On edge hardware a process may want to disable firmware updates as it might be
a bad time to allow an upgrade.

trivial: post release version bump

Release fwupd 1.8.10

emmc: correct legacy GUID generation

It used to be generated with decimal, not hexadecimal values.

Change-Id: I2a6a5bdea50e2d08a7de9f65a1f9a03de29e1591

trivial: Fix bitwise operators in last commit

Add fu_context_remove_flag() for future use

Speed up startup by a huge amount when using directory remotes

By using libxmlb correctly we can avoid rebuilding the metadata if the directory
is unchanged. This means the initial 'generation' is unchanged in speed, but
subsequent loads are almost instant as the archives are not decompressed.

Show some debugging when we ignore a release due to missing checksums

Fallback to the <checksum> if the <artifact> is invalid

In 62a62f8f0f707d815e65ca9d0634459edb6eed97 we started ignoring the artifact
when the type was 'binary' -- however, we need to fall back to the older tag
schema if the data was not set, rather than only if the <artifact> tag was not
found.

wacom-usb: prefix errors that occur when writing to the device

Make it easier to locate errors that occur when writing to the device.

Parse the DT chassis-type when parsing the FDT

uefi-capsule: Do not call grub2-probe without arguments

commit 684bc0381 ("trivial: fix various shellcheck warnings") adds call
to ${grub_probe} without any argument which causes grub2-probe to return
an error, and generating grub configuration fails.

Add --version argument to avoid the error, and redierct the output to
/dev/null so that it's not included in the grub configuration file.

The commit also adds superfluous single quotes causing another error:

/usr/sbin/grub2-probe: error: cannot find a GRUB drive for `${grub_probe} --target=device \${ESP}` | sed -e "s/^/\t/".  Check your device.map.

Fix the quoting to work at least for single device.

Fixes: #5424
Fixes: 684bc0381 ("trivial: fix various shellcheck warnings")
Signed-off-by: Michal Suchanek <msuchanek@suse.de>

Update documentation to indicate that loading "OS Optimized Defaults"
may enable security processor rollback protection on Lenovo systems.

fixes: #5394

Improve FDT parsing compatibility

Newer versions of dtc agressively pack the string table, using *any* matching
suffix rather than whole strings. This is specification compliant, but breaks
if you use the offset as a hash key as a [premature] optimization.

Just use the string table as a flat block of memory rather than pre-parsing it.

This fixes reading the system FDT on new OpenBMC builds.

Refactor the hwids functionality

This refactors the code as it was getting very confusing; before FuSmbios was
reading both SMBIOS and the kernel-provided DT -- and various things were
injecting overrides in three different place. To properly support FDT remove
one layer of indirection.

This also lets us use the compatible strings to enable plugins specifying the
flag _REQUIRE_HWID -- which means we only load the plugin if it's got a chance
of working. e.g.

    [aspeed,ast2500]

trivial: Make the installed-tests redfish.conf secure to avoid a warning

Also, don't attempt to change the permissions if the correct one is already
set.

trivial: update supported cpu documentation to add more info for AMD

This should hopefully help disambiguate when information isn't available
what to do.

Fixes: #5415

synaptics-rmi: add feature to verify signature (#5406)

trivial: Add FU_PATH_KIND_SYSFSDIR_DMI for future use

trivial: Add fu_context_get_hwids() for future use

trivial: Add fu_context_get_smbios() for future use

trivial: Store the chassis kind in the context

trivial: Add FuContextHwidFlags for future usage

trivial: Add a GError parameter to fu_context_get_smbios_string()

This matches the behaviour of fu_smbios_get_string() and was probably accidental.

trivial: Fix the progress steps when dumping firmware

In most cases the firmware dump is going to take a *lot* longer than the
engine startup.

Allow dumping CFI devices using fwupdtool

This regressed with 7dc34ff02e.

trivial: Show a better error when reading am empty CFI flash ID

trivial: Add CFI data for W25Q256

Add System76 launch_heavy_1

Respect user requested paths for ESP even if they aren't volumes

These paths may be used for bind mounts, which we can't accurately
discover. Leave a message in the logs accordingly, but allow these
paths.

fixes: #5185

Add fu_context_get_fdt() to get the Flat Device Tree

This is needed because multiple plugins will soon be consuming the system FDT,
and we don't want to either parse this multiple times, or duplicate the loading
logic.

trivial: Create the parent directories when using fu_firmware_write_file()

trivial: install dmi data into installed-tests

fixes: #5402

Fix installing with -Doffline=false

trivial: Reduce runtime RSS requirement for each device subclass

Remove the FuDeviceClass padding, as this library now loaded using an rpath
rather than a shared library with a static API. This matches what we did for
the FuFirmwareClass objects a while ago.

vbe: Remove the stored VBE dir

This can be easily retrieved using LOCALSTATEDIR_PKG by the subclass.

Do not show a warning when coldplugging an unsupported backend

This also fixes a critical warning about the child progress not being completed.

trivial: Set the backend ID when added

This matches what the plugin does and means there's no critical warning when
adding to the hash table.

trivial: fail setup script if dependencies are missing

This makes CI failures more predictable and obvious.

trivial: drop docs from abi job

It's built with features=disabled, no need to include it.

trivial: clarify documentation on PSP security processor (Fixes: #5394)

synaptics-rmi: add support to write signature

dfu: Add some wisdom for vendors implementing devices

Include the plugin README text in the generated docs

emmc: Add back a legacy GUID to fix a regression

I had no idea anyone was using this, so apologies. The instance ID is completely
wrong, but it is effectively D-Bus ABI and we need to support old firmware in
the field.

Add a pefile firmware parser

This will eventually allow us to reconstruct a SBoM using a UEFI file volume.

This can be used like this `fwupdtool firmware-parse efi/fwupdx64.efi pefile`
to produce:

    <firmware gtype="FuPefileFirmware">
      <data size="0xef59">MZ.</data>
      <firmware>
        <id>.text</id>
        <offset>0x2d0</offset>
        <size>0x7bab</size>
        <data size="0x7bab">H...QRH.=....H.5</data>
      </firmware>
      ...
      <firmware gtype="FuCoswidFirmware">
        <id>fwupd-efi:fwupdx64</id>
        <idx>0x7</idx>
        <version>1.4</version>
        <offset>0xc4e0</offset>
        <size>0xce</size>
        <data size="0xce">..een-US</data>
        <version_scheme>semver</version_scheme>
        <product>fwupdx64</product>
        <summary>EFI helpers to install system firmware</summary>
        <colloquial_version>1.3-7-g881a508</colloquial_version>
        <link>
          <href>https://spdx.org/licenses/LGPL-2.0.html</href>
          <rel>license</rel>
        </link>
        <entity>
          <name>Richard Hughes</name>
          <regid>hughsie.com</regid>
          <role>maintainer</role>
          <role>tag-creator</role>
        </entity>
      </firmware>
    </firmware>

Always search for uSWID data in the image

synaptics-rmi: add support to more firmware partitions

plugins/flashrom: Allow 32MiB images for the StarBook Mk VI (#5383)

Also allow 32MiB images for the coreboot firmware

Signed-off-by: Sean Rhodes <sean@starlabs.systems>
Signed-off-by: Sean Rhodes <sean@starlabs.systems>

synaptics-rmi: add support to USBHID devices