]> git.proxmox.com Git - qemu-server.git/blobdiff - PVE/QemuServer.pm
delete ram state files when restoring a backup
[qemu-server.git] / PVE / QemuServer.pm
index c08bb202c5c87875afab9a7d188beb0729e486dc..7bf3e4d5e7487f94fdd4ddb048af3374db40f630 100644 (file)
@@ -90,6 +90,22 @@ mkdir $lock_dir;
 
 my $pcisysfs = "/sys/bus/pci";
 
+my $cpudesc = {
+    cputype => {
+       description => "Emulated CPU type.",
+       type => 'string',
+       enum => [ qw(486 athlon pentium pentium2 pentium3 coreduo core2duo kvm32 kvm64 qemu32 qemu64 phenom Conroe Penryn Nehalem Westmere SandyBridge IvyBridge Haswell Haswell-noTSX Broadwell Broadwell-noTSX Opteron_G1 Opteron_G2 Opteron_G3 Opteron_G4 Opteron_G5 host) ],
+       default => 'kvm64',
+       default_key => 1,
+    },
+    hidden => {
+       description => "Do not identify as a KVM virtual machine.",
+       type => 'boolean',
+       optional => 1,
+       default => 0
+    },
+};
+
 my $confdesc = {
     onboot => {
        optional => 1,
@@ -353,8 +369,7 @@ EODESCR
        optional => 1,
        description => "Emulated CPU type.",
        type => 'string',
-       enum => [ qw(486 athlon pentium pentium2 pentium3 coreduo core2duo kvm32 kvm64 qemu32 qemu64 phenom Conroe Penryn Nehalem Westmere SandyBridge IvyBridge Haswell Haswell-noTSX Broadwell Broadwell-noTSX Opteron_G1 Opteron_G2 Opteron_G3 Opteron_G4 Opteron_G5 host) ],
-       default => 'kvm64',
+       format => $cpudesc,
     },
     parent => get_standard_option('pve-snapshot-name', {
        optional => 1,
@@ -381,7 +396,6 @@ EODESCR
     smbios1 => {
        description => "Specify SMBIOS type 1 fields.",
        type => 'string', format => 'pve-qm-smbios1',
-       typetext => "[manufacturer=str][,product=str][,version=str][,serial=str] [,uuid=uuid][,sku=str][,family=str]",
        maxLength => 256,
        optional => 1,
     },
@@ -455,7 +469,7 @@ my $nic_model_list_txt = join(' ', sort @$nic_model_list);
 my $netdesc = {
     optional => 1,
     type => 'string', format => 'pve-qm-net',
-    typetext => "MODEL=XX:XX:XX:XX:XX:XX [,bridge=<dev>][,queues=<nbqueues>][,rate=<mbps>] [,tag=<vlanid>][,firewall=0|1],link_down=0|1]",
+    typetext => "MODEL=XX:XX:XX:XX:XX:XX [,bridge=<dev>][,queues=<nbqueues>][,rate=<mbps>] [,tag=<vlanid>][,trunks=<vlanid[;vlanid]>][,firewall=0|1],link_down=0|1]",
     description => <<EODESCR,
 Specify network devices.
 
@@ -486,48 +500,258 @@ for (my $i = 0; $i < $MAX_NETS; $i++)  {
 
 my $drivename_hash;
 
+my %drivedesc_base = (
+    volume => { alias => 'file' },
+    file => {
+       type => 'pve-volume-id',
+       default_key => 1,
+       format_description => 'volume',
+       description => "The drive's backing volume.",
+    },
+    media => {
+       type => 'string',
+       format_description => 'cdrom|disk',
+       enum => [qw(cdrom disk)],
+       description => "The drive's media type.",
+       default => 'disk',
+       optional => 1
+    },
+    cyls => {
+       type => 'integer',
+       format_description => 'count',
+       description => "Force the drive's physical geometry to have a specific cylinder count.",
+       optional => 1
+    },
+    heads => {
+       type => 'integer',
+       format_description => 'count',
+       description => "Force the drive's physical geometry to have a specific head count.",
+       optional => 1
+    },
+    secs => {
+       type => 'integer',
+       format_description => 'count',
+       description => "Force the drive's physical geometry to have a specific sector count.",
+       optional => 1
+    },
+    trans => {
+       type => 'string',
+       format_description => 'none|lba|auto',
+       enum => [qw(none lba auto)],
+       description => "Force disk geometry bios translation mode.",
+       optional => 1,
+    },
+    snapshot => {
+       type => 'boolean',
+       format_description => 'on|off',
+       description => "Whether the drive should be included when making snapshots.",
+       optional => 1,
+    },
+    cache => {
+       type => 'string',
+       format_description => 'none|writethrough|writeback|unsafe|directsync',
+       enum => [qw(none writethrough writeback unsafe directsync)],
+       description => "The drive's cache mode",
+       optional => 1,
+    },
+    format => {
+       type => 'string',
+       format_description => 'drive format',
+       enum => [qw(raw cow qcow qed qcow2 vmdk cloop)],
+       description => "The drive's backing file's data format.",
+       optional => 1,
+    },
+    size => {
+       type => 'string',
+       format => 'disk-size',
+       description => "Disk size. This is purely informational and has no effect.",
+       optional => 1,
+    },
+    backup => {
+       type => 'boolean',
+       format_description => 'on|off',
+       description => "Whether the drive should be included when making backups.",
+       optional => 1,
+    },
+    werror => {
+       type => 'string',
+       format_description => 'enospc|ignore|report|stop',
+       enum => [qw(enospc ignore report stop)],
+       description => 'Write error action.',
+       optional => 1,
+    },
+    aio => {
+       type => 'string',
+       format_description => 'native|threads',
+       enum => [qw(native threads)],
+       description => 'AIO type to use.',
+       optional => 1,
+    },
+    discard => {
+       type => 'string',
+       format_description => 'ignore|on',
+       enum => [qw(ignore on)],
+       description => 'Controls whether to pass discard/trim requests to the underlying storage.',
+       optional => 1,
+    },
+    detect_zeroes => {
+       type => 'boolean',
+       description => 'Controls whether to detect and try to optimize writes of zeroes.',
+       optional => 1,
+    },
+    serial => {
+       type => 'string',
+       format_description => 'serial',
+       description => "The drive's reported serial number.",
+       optional => 1,
+    }
+);
+
+my %rerror_fmt = (
+    rerror => {
+       type => 'string',
+       format_description => 'ignore|report|stop',
+       enum => [qw(ignore report stop)],
+       description => 'Read error action.',
+       optional => 1,
+    },
+);
+
+my %iothread_fmt = ( iothread => {
+       type => 'boolean',
+       format_description => 'off|on',
+       description => "Whether to use iothreads for this drive",
+       optional => 1,
+});
+
+my %model_fmt = (
+    model => {
+       type => 'string',
+       format_description => 'model',
+       description => "The drive's reported model name.",
+       optional => 1,
+    },
+);
+
+my %queues_fmt = (
+    queues => {
+       type => 'integer',
+       format_description => 'nbqueues',
+       description => "Number of queues.",
+       minimum => 2,
+       optional => 1
+    }
+);
+
+my $add_throttle_desc = sub {
+    my ($key, $type, $what, $size, $longsize) = @_;
+    $drivedesc_base{$key} = {
+       type => $type,
+       format_description => $size,
+       description => "Maximum $what speed in $longsize per second.",
+       optional => 1,
+    };
+};
+# throughput: (leaky bucket)
+$add_throttle_desc->('bps',     'integer', 'r/w speed',   'bps',  'bytes');
+$add_throttle_desc->('bps_rd',  'integer', 'read speed',  'bps',  'bytes');
+$add_throttle_desc->('bps_wr',  'integer', 'write speed', 'bps',  'bytes');
+$add_throttle_desc->('mbps',    'float',   'r/w speed',   'mbps', 'megabytes');
+$add_throttle_desc->('mbps_rd', 'float',   'read speed',  'mbps', 'megabytes');
+$add_throttle_desc->('mbps_wr', 'float',   'write speed', 'mbps', 'megabytes');
+$add_throttle_desc->('iops',    'integer', 'r/w I/O',     'iops', 'operations');
+$add_throttle_desc->('iops_rd', 'integer', 'read I/O',    'iops', 'operations');
+$add_throttle_desc->('iops_wr', 'integer', 'write I/O',   'iops', 'operations');
+
+# pools: (pool of IO before throttling starts taking effect)
+$add_throttle_desc->('mbps_max',    'float',   'unthrottled r/w pool',       'mbps', 'megabytes');
+$add_throttle_desc->('mbps_rd_max', 'float',   'unthrottled read pool',      'mbps', 'megabytes');
+$add_throttle_desc->('mbps_wr_max', 'float',   'unthrottled write pool',     'mbps', 'megabytes');
+$add_throttle_desc->('iops_max',    'integer', 'unthrottled r/w I/O pool',   'iops', 'operations');
+$add_throttle_desc->('iops_rd_max', 'integer', 'unthrottled read I/O pool',  'iops', 'operations');
+$add_throttle_desc->('iops_wr_max', 'integer', 'unthrottled write I/O pool', 'iops', 'operations');
+
+my $ide_fmt = {
+    %drivedesc_base,
+    %rerror_fmt,
+    %model_fmt,
+};
+
 my $idedesc = {
     optional => 1,
-    type => 'string', format => 'pve-qm-drive',
-    typetext => '[volume=]volume,] [,media=cdrom|disk] [,cyls=c,heads=h,secs=s[,trans=t]] [,snapshot=on|off] [,cache=none|writethrough|writeback|unsafe|directsync] [,format=f] [,backup=yes|no] [,rerror=ignore|report|stop] [,werror=enospc|ignore|report|stop] [,aio=native|threads] [,discard=ignore|on] [,detect_zeroes=on|off] [,serial=serial][,model=model]',
+    type => 'string', format => $ide_fmt,
     description => "Use volume as IDE hard disk or CD-ROM (n is 0 to " .($MAX_IDE_DISKS -1) . ").",
 };
 PVE::JSONSchema::register_standard_option("pve-qm-ide", $idedesc);
 
+my $scsi_fmt = {
+    %drivedesc_base,
+    %iothread_fmt,
+    %queues_fmt,
+};
 my $scsidesc = {
     optional => 1,
-    type => 'string', format => 'pve-qm-drive',
-    typetext => '[volume=]volume,] [,media=cdrom|disk] [,cyls=c,heads=h,secs=s[,trans=t]] [,snapshot=on|off] [,cache=none|writethrough|writeback|unsafe|directsync] [,format=f] [,backup=yes|no] [,rerror=ignore|report|stop] [,werror=enospc|ignore|report|stop] [,aio=native|threads] [,discard=ignore|on] [,detect_zeroes=on|off] [,iothread=on] [,queues=<nbqueues>] [,serial=serial]',
+    type => 'string', format => $scsi_fmt,
     description => "Use volume as SCSI hard disk or CD-ROM (n is 0 to " . ($MAX_SCSI_DISKS - 1) . ").",
 };
 PVE::JSONSchema::register_standard_option("pve-qm-scsi", $scsidesc);
 
+my $sata_fmt = {
+    %drivedesc_base,
+    %rerror_fmt,
+};
 my $satadesc = {
     optional => 1,
-    type => 'string', format => 'pve-qm-drive',
-    typetext => '[volume=]volume,] [,media=cdrom|disk] [,cyls=c,heads=h,secs=s[,trans=t]] [,snapshot=on|off] [,cache=none|writethrough|writeback|unsafe|directsync] [,format=f] [,backup=yes|no] [,rerror=ignore|report|stop] [,werror=enospc|ignore|report|stop] [,aio=native|threads]  [,discard=ignore|on] [,detect_zeroes=on|off] [,serial=serial]',
+    type => 'string', format => $sata_fmt,
     description => "Use volume as SATA hard disk or CD-ROM (n is 0 to " . ($MAX_SATA_DISKS - 1). ").",
 };
 PVE::JSONSchema::register_standard_option("pve-qm-sata", $satadesc);
 
+my $virtio_fmt = {
+    %drivedesc_base,
+    %iothread_fmt,
+    %rerror_fmt,
+};
 my $virtiodesc = {
     optional => 1,
-    type => 'string', format => 'pve-qm-drive',
-    typetext => '[volume=]volume,] [,media=cdrom|disk] [,cyls=c,heads=h,secs=s[,trans=t]] [,snapshot=on|off] [,cache=none|writethrough|writeback|unsafe|directsync] [,format=f] [,backup=yes|no] [,rerror=ignore|report|stop] [,werror=enospc|ignore|report|stop] [,aio=native|threads]  [,discard=ignore|on] [,detect_zeroes=on|off] [,iothread=on] [,serial=serial]',
+    type => 'string', format => $virtio_fmt,
     description => "Use volume as VIRTIO hard disk (n is 0 to " . ($MAX_VIRTIO_DISKS - 1) . ").",
 };
 PVE::JSONSchema::register_standard_option("pve-qm-virtio", $virtiodesc);
 
+my $alldrive_fmt = {
+    %drivedesc_base,
+    %rerror_fmt,
+    %iothread_fmt,
+    %model_fmt,
+    %queues_fmt,
+};
+
+my $usbformat = {
+    host => {
+       default_key => 1,
+       type => 'string', format => 'pve-qm-usb-device',
+       format_description => 'HOSTUSBDEVICE|spice',
+       description => 'The Host USB device or port or the value spice',
+    },
+    usb3 => {
+       optional => 1,
+       type => 'boolean',
+       format_description => 'yes|no',
+       description => 'Specifies whether if given host option is a USB3 device or port',
+    },
+};
+
 my $usbdesc = {
     optional => 1,
-    type => 'string', format => 'pve-qm-usb-device',
-    typetext => 'host=HOSTUSBDEVICE|spice',
+    type => 'string', format => $usbformat,
     description => <<EODESCR,
 Configure an USB device (n is 0 to 4). This can be used to
 pass-through usb devices to the guest. HOSTUSBDEVICE syntax is:
 
 'bus-port(.port)*' (decimal numbers) or
-'vendor_id:product_id' (hexadeciaml numbers)
+'vendor_id:product_id' (hexadeciaml numbers) or
+'spice'
 
 You can use the 'lsusb -t' command to list existing usb devices.
 
@@ -535,6 +759,8 @@ Note: This option allows direct access to host hardware. So it is no longer poss
 
 The value 'spice' can be used to add a usb redirection devices for spice.
 
+The 'usb3' option determines whether the device is a USB3 device or not (this does currently not work reliably with spice redirection and is then ignored).
+
 EODESCR
 };
 PVE::JSONSchema::register_standard_option("pve-qm-usb", $usbdesc);
@@ -845,40 +1071,6 @@ sub pve_verify_hotplug_features {
     die "unable to parse hotplug option\n";
 }
 
-my $parse_size = sub {
-    my ($value) = @_;
-
-    return undef if $value !~ m/^(\d+(\.\d+)?)([KMG])?$/;
-    my ($size, $unit) = ($1, $3);
-    if ($unit) {
-       if ($unit eq 'K') {
-           $size = $size * 1024;
-       } elsif ($unit eq 'M') {
-           $size = $size * 1024 * 1024;
-       } elsif ($unit eq 'G') {
-           $size = $size * 1024 * 1024 * 1024;
-       }
-    }
-    return int($size);
-};
-
-my $format_size = sub {
-    my ($size) = @_;
-
-    $size = int($size);
-
-    my $kb = int($size/1024);
-    return $size if $kb*1024 != $size;
-
-    my $mb = int($kb/1024);
-    return "${kb}K" if $mb*1024 != $kb;
-
-    my $gb = int($mb/1024);
-    return "${mb}M" if $gb*1024 != $mb;
-
-    return "${gb}G";
-};
-
 # ideX = [volume=]volume-id[,media=d][,cyls=c,heads=h,secs=s[,trans=t]]
 #        [,snapshot=on|off][,cache=on|off][,format=f][,backup=yes|no]
 #        [,rerror=ignore|report|stop][,werror=enospc|ignore|report|stop]
@@ -888,122 +1080,62 @@ my $format_size = sub {
 sub parse_drive {
     my ($key, $data) = @_;
 
-    my $res = {};
+    my ($interface, $index);
 
-    # $key may be undefined - used to verify JSON parameters
-    if (!defined($key)) {
-       $res->{interface} = 'unknown'; # should not harm when used to verify parameters
-       $res->{index} = 0;
-    } elsif ($key =~ m/^([^\d]+)(\d+)$/) {
-       $res->{interface} = $1;
-       $res->{index} = $2;
+    if ($key =~ m/^([^\d]+)(\d+)$/) {
+       $interface = $1;
+       $index = $2;
     } else {
        return undef;
     }
 
-    foreach my $p (split (/,/, $data)) {
-       next if $p =~ m/^\s*$/;
-
-       if ($p =~ m/^(file|volume|cyls|heads|secs|trans|media|snapshot|cache|format|rerror|werror|backup|aio|bps|mbps|mbps_max|bps_rd|mbps_rd|mbps_rd_max|bps_wr|mbps_wr|mbps_wr_max|iops|iops_max|iops_rd|iops_rd_max|iops_wr|iops_wr_max|size|discard|detect_zeroes|iothread|queues|serial|model)=(.+)$/) {
-           my ($k, $v) = ($1, $2);
-
-           $k = 'file' if $k eq 'volume';
-
-           return undef if defined $res->{$k};
-
-           if ($k eq 'bps' || $k eq 'bps_rd' || $k eq 'bps_wr') {
-               return undef if !$v || $v !~ m/^\d+/;
-               $k = "m$k";
-               $v = sprintf("%.3f", $v / (1024*1024));
-           }
-           $res->{$k} = $v;
-       } else {
-           if (!$res->{file} && $p !~ m/=/) {
-               $res->{file} = $p;
-           } else {
-               return undef;
+    my $desc = $key =~ /^unused\d+$/ ? $alldrive_fmt
+                                     : $confdesc->{$key}->{format};
+    if (!$desc) {
+       warn "invalid drive key: $key\n";
+       return undef;
+    }
+    my $res = eval { PVE::JSONSchema::parse_property_string($desc, $data) };
+    return undef if !$res;
+    $res->{interface} = $interface;
+    $res->{index} = $index;
+
+    my $error = 0;
+    foreach my $opt (qw(bps bps_rd bps_wr)) {
+       if (my $bps = defined(delete $res->{$opt})) {
+           if (defined($res->{"m$opt"})) {
+               warn "both $opt and m$opt specified\n";
+               ++$error;
+               next;
            }
+           $res->{"m$opt"} = sprintf("%.3f", $bps / (1024*1024.0));
        }
     }
-
-    return undef if !$res->{file};
-
-    return undef if $res->{cache} &&
-       $res->{cache} !~ m/^(off|none|writethrough|writeback|unsafe|directsync)$/;
-    return undef if $res->{snapshot} && $res->{snapshot} !~ m/^(on|off)$/;
-    return undef if $res->{cyls} && $res->{cyls} !~ m/^\d+$/;
-    return undef if $res->{heads} && $res->{heads} !~ m/^\d+$/;
-    return undef if $res->{secs} && $res->{secs} !~ m/^\d+$/;
-    return undef if $res->{media} && $res->{media} !~ m/^(disk|cdrom)$/;
-    return undef if $res->{trans} && $res->{trans} !~ m/^(none|lba|auto)$/;
-    return undef if $res->{format} && $res->{format} !~ m/^(raw|cow|qcow|qed|qcow2|vmdk|cloop)$/;
-    return undef if $res->{rerror} && $res->{rerror} !~ m/^(ignore|report|stop)$/;
-    return undef if $res->{werror} && $res->{werror} !~ m/^(enospc|ignore|report|stop)$/;
-    return undef if $res->{backup} && $res->{backup} !~ m/^(yes|no)$/;
-    return undef if $res->{aio} && $res->{aio} !~ m/^(native|threads)$/;
-    return undef if $res->{discard} && $res->{discard} !~ m/^(ignore|on)$/;
-    return undef if $res->{detect_zeroes} && $res->{detect_zeroes} !~ m/^(on|off)$/;
-    return undef if $res->{iothread} && $res->{iothread} !~ m/^(on)$/;
-    return undef if $res->{queues} && ($res->{queues} !~ m/^\d+$/ || $res->{queues} < 2);
+    return undef if $error;
 
     return undef if $res->{mbps_rd} && $res->{mbps};
     return undef if $res->{mbps_wr} && $res->{mbps};
-
-    return undef if $res->{mbps} && $res->{mbps} !~ m/^\d+(\.\d+)?$/;
-    return undef if $res->{mbps_max} && $res->{mbps_max} !~ m/^\d+(\.\d+)?$/;
-    return undef if $res->{mbps_rd} && $res->{mbps_rd} !~ m/^\d+(\.\d+)?$/;
-    return undef if $res->{mbps_rd_max} && $res->{mbps_rd_max} !~ m/^\d+(\.\d+)?$/;
-    return undef if $res->{mbps_wr} && $res->{mbps_wr} !~ m/^\d+(\.\d+)?$/;
-    return undef if $res->{mbps_wr_max} && $res->{mbps_wr_max} !~ m/^\d+(\.\d+)?$/;
-
     return undef if $res->{iops_rd} && $res->{iops};
     return undef if $res->{iops_wr} && $res->{iops};
 
-
-    return undef if $res->{iops} && $res->{iops} !~ m/^\d+$/;
-    return undef if $res->{iops_max} && $res->{iops_max} !~ m/^\d+$/;
-    return undef if $res->{iops_rd} && $res->{iops_rd} !~ m/^\d+$/;
-    return undef if $res->{iops_rd_max} && $res->{iops_rd_max} !~ m/^\d+$/;
-    return undef if $res->{iops_wr} && $res->{iops_wr} !~ m/^\d+$/;
-    return undef if $res->{iops_wr_max} && $res->{iops_wr_max} !~ m/^\d+$/;
-
-    if ($res->{size}) {
-       return undef if !defined($res->{size} = &$parse_size($res->{size}));
-    }
-
     if ($res->{media} && ($res->{media} eq 'cdrom')) {
        return undef if $res->{snapshot} || $res->{trans} || $res->{format};
        return undef if $res->{heads} || $res->{secs} || $res->{cyls};
        return undef if $res->{interface} eq 'virtio';
     }
 
-    # rerror does not work with scsi drives
-    if ($res->{rerror}) {
-       return undef if $res->{interface} eq 'scsi';
+    if (my $size = $res->{size}) {
+       return undef if !defined($res->{size} = PVE::JSONSchema::parse_size($size));
     }
 
     return $res;
 }
 
-my @qemu_drive_options = qw(heads secs cyls trans media format cache snapshot rerror werror aio discard iops iops_rd iops_wr iops_max iops_rd_max iops_wr_max serial);
-
 sub print_drive {
     my ($vmid, $drive) = @_;
-
-    my $opts = '';
-    foreach my $o (@qemu_drive_options, qw(mbps mbps_rd mbps_wr mbps_max mbps_rd_max mbps_wr_max backup iothread queues detect_zeroes)) {
-       $opts .= ",$o=$drive->{$o}" if $drive->{$o};
-    }
-
-    if ($drive->{size}) {
-       $opts .= ",size=" . &$format_size($drive->{size});
-    }
-
-    if (my $model = $drive->{model}) {
-       $opts .= ",model=$model";
-    }
-
-    return "$drive->{file}$opts";
+    my $data = { %$drive };
+    delete $data->{$_} for qw(index interface);
+    return PVE::JSONSchema::print_property_string($data, $alldrive_fmt);
 }
 
 sub scsi_inquiry {
@@ -1168,6 +1300,7 @@ sub get_initiator_name {
     return $initiator;
 }
 
+my @qemu_drive_options = qw(heads secs cyls trans media format cache snapshot rerror werror aio discard iops iops_rd iops_wr iops_max iops_rd_max iops_wr_max serial);
 sub print_drive_full {
     my ($storecfg, $vmid, $drive) = @_;
 
@@ -1185,6 +1318,7 @@ sub print_drive_full {
            $format = qemu_img_format($scfg, $volname);
        } else {
            $path = $volid;
+           $format = "raw";
        }
    }
 
@@ -1221,7 +1355,7 @@ sub print_drive_full {
 
     if (!drive_is_cdrom($drive)) {
        my $detectzeroes;
-       if ($drive->{detect_zeroes} && $drive->{detect_zeroes} eq 'off') {
+       if (defined($drive->{detect_zeroes}) && !$drive->{detect_zeroes}) {
            $detectzeroes = 'off';
        } elsif ($drive->{discard}) {
            $detectzeroes = $drive->{discard} eq 'on' ? 'unmap' : 'on';
@@ -1400,6 +1534,8 @@ sub parse_net {
            $res->{rate} = $1;
         } elsif ($kvp =~ m/^tag=(\d+)$/) {
             $res->{tag} = $1;
+        } elsif ($kvp =~ m/^trunks=([0-9;]+)$/) {
+           $res->{trunks} = $1;
         } elsif ($kvp =~ m/^firewall=([01])$/) {
            $res->{firewall} = $1;
        } elsif ($kvp =~ m/^link_down=([01])$/) {
@@ -1423,6 +1559,7 @@ sub print_net {
     $res .= ",bridge=$net->{bridge}" if $net->{bridge};
     $res .= ",rate=$net->{rate}" if $net->{rate};
     $res .= ",tag=$net->{tag}" if $net->{tag};
+    $res .= ",trunks=$net->{trunks}" if $net->{trunks};
     $res .= ",firewall=1" if $net->{firewall};
     $res .= ",link_down=1" if $net->{link_down};
     $res .= ",queues=$net->{queues}" if $net->{queues};
@@ -1551,57 +1688,66 @@ sub vmconfig_cleanup_pending {
     return $changes;
 }
 
-my $valid_smbios1_options = {
-    manufacturer => '\S+',
-    product => '\S+',
-    version => '\S+',
-    serial => '\S+',
-    uuid => '[a-fA-F0-9]{8}(?:-[a-fA-F0-9]{4}){3}-[a-fA-F0-9]{12}',
-    sku => '\S+',
-    family => '\S+',
+# smbios: [manufacturer=str][,product=str][,version=str][,serial=str][,uuid=uuid][,sku=str][,family=str]
+my $smbios1_desc = {
+    uuid => {
+       type => 'string',
+       pattern => '[a-fA-F0-9]{8}(?:-[a-fA-F0-9]{4}){3}-[a-fA-F0-9]{12}',
+       format_description => 'UUID',
+       optional => 1,
+    },
+    version => {
+       type => 'string',
+       pattern => '\S+',
+       format_description => 'str',
+       optional => 1,
+    },
+    serial => {
+       type => 'string',
+       pattern => '\S+',
+       format_description => 'str',
+       optional => 1,
+    },
+    manufacturer => {
+       type => 'string',
+       pattern => '\S+',
+       format_description => 'name',
+       optional => 1,
+    },
+    product => {
+       type => 'string',
+       pattern => '\S+',
+       format_description => 'name',
+       optional => 1,
+    },
+    sku => {
+       type => 'string',
+       pattern => '\S+',
+       format_description => 'str',
+       optional => 1,
+    },
+    family => {
+       type => 'string',
+       pattern => '\S+',
+       format_description => 'str',
+       optional => 1,
+    },
 };
 
-# smbios: [manufacturer=str][,product=str][,version=str][,serial=str][,uuid=uuid][,sku=str][,family=str]
 sub parse_smbios1 {
     my ($data) = @_;
 
-    my $res = {};
-
-    foreach my $kvp (split(/,/, $data)) {
-       return undef if $kvp !~ m/^(\S+)=(.+)$/;
-       my ($k, $v) = split(/=/, $kvp);
-       return undef if !defined($k) || !defined($v);
-       return undef if !$valid_smbios1_options->{$k};
-       return undef if $v !~ m/^$valid_smbios1_options->{$k}$/;
-       $res->{$k} = $v;
-    }
-
+    my $res = eval { PVE::JSONSchema::parse_property_string($smbios1_desc, $data) };
+    warn $@ if $@;
     return $res;
 }
 
 sub print_smbios1 {
     my ($smbios1) = @_;
-
-    my $data = '';
-    foreach my $k (keys %$smbios1) {
-       next if !defined($smbios1->{$k});
-       next if !$valid_smbios1_options->{$k};
-       $data .= ',' if $data;
-       $data .= "$k=$smbios1->{$k}";
-    }
-    return $data;
+    return PVE::JSONSchema::print_property_string($smbios1, $smbios1_desc);
 }
 
-PVE::JSONSchema::register_format('pve-qm-smbios1', \&verify_smbios1);
-sub verify_smbios1 {
-    my ($value, $noerr) = @_;
-
-    return $value if parse_smbios1($value);
-
-    return undef if $noerr;
-
-    die "unable to parse smbios (type 1) options\n";
-}
+PVE::JSONSchema::register_format('pve-qm-smbios1', $smbios1_desc);
 
 PVE::JSONSchema::register_format('pve-qm-bootdisk', \&verify_bootdisk);
 sub verify_bootdisk {
@@ -1636,17 +1782,6 @@ sub verify_net {
     die "unable to parse network options\n";
 }
 
-PVE::JSONSchema::register_format('pve-qm-drive', \&verify_drive);
-sub verify_drive {
-    my ($value, $noerr) = @_;
-
-    return $value if parse_drive(undef, $value);
-
-    return undef if $noerr;
-
-    die "unable to parse drive options\n";
-}
-
 PVE::JSONSchema::register_format('pve-qm-hostpci', \&verify_hostpci);
 sub verify_hostpci {
     my ($value, $noerr) = @_;
@@ -1696,27 +1831,18 @@ sub parse_usb_device {
 
     return undef if !$value;
 
-    my @dl = split(/,/, $value);
-    my $found;
-
     my $res = {};
-    foreach my $v (@dl) {
-       if ($v =~ m/^host=(0x)?([0-9A-Fa-f]{4}):(0x)?([0-9A-Fa-f]{4})$/) {
-           $found = 1;
-           $res->{vendorid} = $2;
-           $res->{productid} = $4;
-       } elsif ($v =~ m/^host=(\d+)\-(\d+(\.\d+)*)$/) {
-           $found = 1;
-           $res->{hostbus} = $1;
-           $res->{hostport} = $2;
-       } elsif ($v =~ m/^spice$/) {
-           $found = 1;
-           $res->{spice} = 1;
-       } else {
-           return undef;
-       }
+    if ($value =~ m/^(0x)?([0-9A-Fa-f]{4}):(0x)?([0-9A-Fa-f]{4})$/) {
+       $res->{vendorid} = $2;
+       $res->{productid} = $4;
+    } elsif ($value =~ m/^(\d+)\-(\d+(\.\d+)*)$/) {
+       $res->{hostbus} = $1;
+       $res->{hostport} = $2;
+    } elsif ($value =~ m/^spice$/i) {
+       $res->{spice} = 1;
+    } else {
+       return undef;
     }
-    return undef if !$found;
 
     return $res;
 }
@@ -1854,13 +1980,13 @@ sub touch_config {
 }
 
 sub destroy_vm {
-    my ($storecfg, $vmid, $keep_empty_config) = @_;
+    my ($storecfg, $vmid, $keep_empty_config, $skiplock) = @_;
 
     my $conffile = config_file($vmid);
 
     my $conf = load_config($vmid);
 
-    check_lock($conf);
+    check_lock($conf) if !$skiplock;
 
     # only remove disks owned by this VM
     foreach_drive($conf, sub {
@@ -2118,22 +2244,14 @@ sub write_vm_config {
     return $raw;
 }
 
-sub update_config_nolock {
-    my ($vmid, $conf, $skiplock) = @_;
-
-    check_lock($conf) if !$skiplock;
+sub write_config {
+    my ($vmid, $conf) = @_;
 
     my $cfspath = cfs_config_path($vmid);
 
     PVE::Cluster::cfs_write_file($cfspath, $conf);
 }
 
-sub update_config {
-    my ($vmid, $conf, $skiplock) = @_;
-
-    lock_config($vmid, &update_config_nolock, $conf, $skiplock);
-}
-
 sub load_defaults {
 
     my $res = {};
@@ -2725,12 +2843,27 @@ sub config_to_command {
         my $use_usb2 = 0;
        for (my $i = 0; $i < $MAX_USB_DEVICES; $i++)  {
            next if !$conf->{"usb$i"};
+           my $d = eval { PVE::JSONSchema::parse_property_string($usbdesc->{format},$conf->{"usb$i"}) };
+           next if !$d || $d->{usb3}; # do not add usb2 controller if we have only usb3 devices
            $use_usb2 = 1;
        }
        # include usb device config
        push @$devices, '-readconfig', '/usr/share/qemu-server/pve-usb.cfg' if $use_usb2;
     }
 
+    # add usb3 controller if needed
+
+    my $use_usb3 = 0;
+    for (my $i = 0; $i < $MAX_USB_DEVICES; $i++)  {
+       next if !$conf->{"usb$i"};
+       my $d = eval { PVE::JSONSchema::parse_property_string($usbdesc->{format},$conf->{"usb$i"}) };
+       next if !$d || !$d->{usb3};
+       $use_usb3 = 1;
+    }
+
+    $pciaddr = print_pci_addr("xhci", $bridges);
+    push @$devices, '-device', "nec-usb-xhci,id=xhci$pciaddr" if $use_usb3;
+
     my $vga = $conf->{vga};
 
     my $qxlnum = vga_conf_has_spice($vga);
@@ -2758,6 +2891,7 @@ sub config_to_command {
 
     push @$devices, '-device', print_tabletdevice_full($conf) if $tablet;
 
+    my $kvm_off = 0;
     my $nohyperv;
     # host pci devices
     for (my $i = 0; $i < $MAX_HOSTPCI_DEVICES; $i++)  {
@@ -2775,7 +2909,7 @@ sub config_to_command {
        my $rombar = $d->{rombar} && $d->{rombar} eq 'off' ? ",rombar=0" : "";
        my $xvga = $d->{'x-vga'} && $d->{'x-vga'} eq 'on' ? ",x-vga=on" : "";
        if ($xvga && $xvga ne '') {
-           push @$cpuFlags, 'kvm=off';
+           $kvm_off = 1;
            $vga = 'none';
            $nohyperv = 1;
            if ($conf->{bios} && $conf->{bios} eq 'ovmf') {
@@ -2806,16 +2940,27 @@ sub config_to_command {
 
     # usb devices
     for (my $i = 0; $i < $MAX_USB_DEVICES; $i++)  {
-       my $d = parse_usb_device($conf->{"usb$i"});
+       next if !$conf->{"usb$i"};
+       my $d = eval { PVE::JSONSchema::parse_property_string($usbdesc->{format},$conf->{"usb$i"}) };
        next if !$d;
-       if ($d->{vendorid} && $d->{productid}) {
-           push @$devices, '-device', "usb-host,vendorid=0x$d->{vendorid},productid=0x$d->{productid}";
-       } elsif (defined($d->{hostbus}) && defined($d->{hostport})) {
-           push @$devices, '-device', "usb-host,hostbus=$d->{hostbus},hostport=$d->{hostport}";
-       } elsif ($d->{spice}) {
-           # usb redir support for spice
-           push @$devices, '-chardev', "spicevmc,id=usbredirchardev$i,name=usbredir";
-           push @$devices, '-device', "usb-redir,chardev=usbredirchardev$i,id=usbredirdev$i,bus=ehci.0";
+
+       # if it is a usb3 device, attach it to the xhci controller, else omit the bus option
+       my $usbbus = '';
+       if (defined($d->{usb3}) && $d->{usb3}) {
+           $usbbus = ',bus=xhci.0';
+       }
+
+       if (defined($d->{host})) {
+           $d = parse_usb_device($d->{host});
+           if (defined($d->{vendorid}) && defined($d->{productid})) {
+               push @$devices, '-device', "usb-host$usbbus,vendorid=0x$d->{vendorid},productid=0x$d->{productid}";
+           } elsif (defined($d->{hostbus}) && defined($d->{hostport})) {
+               push @$devices, '-device', "usb-host$usbbus,hostbus=$d->{hostbus},hostport=$d->{hostport}";
+           } elsif (defined($d->{spice}) && $d->{spice}) {
+               # usb redir support for spice, currently no usb3
+               push @$devices, '-chardev', "spicevmc,id=usbredirchardev$i,name=usbredir";
+               push @$devices, '-device', "usb-redir,chardev=usbredirchardev$i,id=usbredirdev$i,bus=ehci.0";
+           }
        }
     }
 
@@ -2940,7 +3085,12 @@ sub config_to_command {
     }
 
     my $cpu = $nokvm ? "qemu64" : "kvm64";
-    $cpu = $conf->{cpu} if $conf->{cpu};
+    if (my $cputype = $conf->{cpu}) {
+       my $cpuconf = PVE::JSONSchema::parse_property_string($cpudesc, $cputype)
+           or die "Cannot parse cpu description: $cputype\n";
+       $cpu = $cpuconf->{cputype};
+       $kvm_off = 1 if $cpuconf->{hidden};
+    }
 
     push @$cpuFlags , '+lahf_lm' if $cpu eq 'kvm64';
 
@@ -2959,6 +3109,8 @@ sub config_to_command {
 
     push @$cpuFlags, 'enforce' if $cpu ne 'host' && !$nokvm;
 
+    push @$cpuFlags, 'kvm=off' if $kvm_off;
+
     $cpu .= "," . join(',', @$cpuFlags) if scalar(@$cpuFlags);
 
     push @$cmd, '-cpu', $cpu;
@@ -3059,7 +3211,7 @@ sub config_to_command {
            #if dimm_memory is not aligned to dimm map
            if($current_size > $memory) {
                 $conf->{memory} = $current_size;
-                update_config_nolock($vmid, $conf, 1);
+                write_config($vmid, $conf);
            }
        });
     }
@@ -3716,7 +3868,7 @@ sub qemu_memory_hotplug {
                }
                #update conf after each succesful module hotplug
                $conf->{memory} = $current_size;
-               update_config_nolock($vmid, $conf, 1);
+               write_config($vmid, $conf);
        });
 
     } else {
@@ -3741,7 +3893,7 @@ sub qemu_memory_hotplug {
                $conf->{memory} = $current_size;
 
                eval { qemu_objectdel($vmid, "mem-$name"); };
-               update_config_nolock($vmid, $conf, 1);
+               write_config($vmid, $conf);
        });
     }
 }
@@ -3994,7 +4146,7 @@ sub vmconfig_hotplug_pending {
     }
 
     if ($changes) {
-       update_config_nolock($vmid, $conf, 1);
+       write_config($vmid, $conf);
        $conf = load_config($vmid); # update/reload
     }
 
@@ -4045,7 +4197,7 @@ sub vmconfig_hotplug_pending {
            # save new config if hotplug was successful
            delete $conf->{$opt};
            vmconfig_undelete_pending_option($conf, $opt);
-           update_config_nolock($vmid, $conf, 1);
+           write_config($vmid, $conf);
            $conf = load_config($vmid); # update/reload
        }
     }
@@ -4103,7 +4255,7 @@ sub vmconfig_hotplug_pending {
            # save new config if hotplug was successful
            $conf->{$opt} = $value;
            delete $conf->{pending}->{$opt};
-           update_config_nolock($vmid, $conf, 1);
+           write_config($vmid, $conf);
            $conf = load_config($vmid); # update/reload
        }
     }
@@ -4159,16 +4311,16 @@ sub vmconfig_apply_pending {
        $conf = load_config($vmid); # update/reload
        if (!defined($conf->{$opt})) {
            vmconfig_undelete_pending_option($conf, $opt);
-           update_config_nolock($vmid, $conf, 1);
+           write_config($vmid, $conf);
        } elsif (valid_drivename($opt)) {
            vmconfig_delete_or_detach_drive($vmid, $storecfg, $conf, $opt, $force);
            vmconfig_undelete_pending_option($conf, $opt);
            delete $conf->{$opt};
-           update_config_nolock($vmid, $conf, 1);
+           write_config($vmid, $conf);
        } else {
            vmconfig_undelete_pending_option($conf, $opt);
            delete $conf->{$opt};
-           update_config_nolock($vmid, $conf, 1);
+           write_config($vmid, $conf);
        }
     }
 
@@ -4188,7 +4340,7 @@ sub vmconfig_apply_pending {
        }
 
        delete $conf->{pending}->{$opt};
-       update_config_nolock($vmid, $conf, 1);
+       write_config($vmid, $conf);
     }
 }
 
@@ -4239,9 +4391,10 @@ sub vmconfig_update_net {
 
            if (&$safe_string_ne($oldnet->{bridge}, $newnet->{bridge}) ||
                &$safe_num_ne($oldnet->{tag}, $newnet->{tag}) ||
+               &$safe_string_ne($oldnet->{trunks}, $newnet->{trunks}) ||
                &$safe_num_ne($oldnet->{firewall}, $newnet->{firewall})) {
                PVE::Network::tap_unplug($iface);
-               PVE::Network::tap_plug($iface, $newnet->{bridge}, $newnet->{tag}, $newnet->{firewall});
+               PVE::Network::tap_plug($iface, $newnet->{bridge}, $newnet->{tag}, $newnet->{firewall}, $newnet->{trunks});
            }
 
            if (&$safe_string_ne($oldnet->{link_down}, $newnet->{link_down})) {
@@ -4345,7 +4498,7 @@ sub vmconfig_update_disk {
 
     die "skip\n" if !$hotplug || $opt =~ m/(ide|sata)(\d+)/;
     # hotplug new disks
-    PVE::Storage::activate_volumes($storecfg, [$drive->{file}]);
+    PVE::Storage::activate_volumes($storecfg, [$drive->{file}]) if $drive->{file} !~ m|^/dev/.+|;
     vm_deviceplug($storecfg, $conf, $vmid, $opt, $drive);
 }
 
@@ -4730,10 +4883,8 @@ sub vm_destroy {
 
        my $conf = load_config($vmid);
 
-       check_lock($conf) if !$skiplock;
-
        if (!check_running($vmid)) {
-           destroy_vm($storecfg, $vmid);
+           destroy_vm($storecfg, $vmid, undef, $skiplock);
        } else {
            die "VM $vmid is running - destroy failed\n";
        }
@@ -4920,6 +5071,7 @@ sub print_pci_addr {
        'net29' => { bus => 1, addr => 24 },
        'net30' => { bus => 1, addr => 25 },
        'net31' => { bus => 1, addr => 26 },
+       'xhci' => { bus => 1, addr => 27 },
        'virtio6' => { bus => 2, addr => 1 },
        'virtio7' => { bus => 2, addr => 2 },
        'virtio8' => { bus => 2, addr => 3 },
@@ -5109,10 +5261,10 @@ sub restore_update_config_line {
     } elsif ($line =~ m/^((ide|scsi|virtio|sata)\d+):\s*(\S+)\s*$/) {
        my $virtdev = $1;
        my $value = $3;
-       if ($line =~ m/backup=no/) {
+       my $di = parse_drive($virtdev, $value);
+       if (defined($di->{backup}) && !$di->{backup}) {
            print $outfd "#$line";
-       } elsif ($virtdev && $map->{$virtdev}) {
-           my $di = parse_drive($virtdev, $value);
+       } elsif ($map->{$virtdev}) {
            delete $di->{format}; # format can change on restore
            $di->{file} = $map->{$virtdev};
            $value = print_drive($vmid, $di);
@@ -5268,7 +5420,7 @@ sub rescan {
 
        my $changes = update_disksize($vmid, $conf, $vm_volids);
 
-       update_config_nolock($vmid, $conf, 1) if $changes;
+       write_config($vmid, $conf) if $changes;
     };
 
     if (defined($vmid)) {
@@ -5350,8 +5502,11 @@ sub restore_vma_archive {
            "unable to read qemu-server.conf - $!\n";
 
        my $fwcfgfn = "$tmpdir/qemu-server.fw";
-       PVE::Tools::file_copy($fwcfgfn, "/etc/pve/firewall/$vmid.fw")
-           if -f $fwcfgfn;
+       if (-f $fwcfgfn) {
+           my $pve_firewall_dir = '/etc/pve/firewall';
+           mkdir $pve_firewall_dir; # make sure the dir exists
+           PVE::Tools::file_copy($fwcfgfn, "${pve_firewall_dir}/$vmid.fw");
+       }
 
        while (defined(my $line = <$fh>)) {
            if ($line =~ m/^\#qmdump\#map:(\S+):(\S+):(\S*):(\S*):$/) {
@@ -5407,6 +5562,18 @@ sub restore_vma_archive {
                    PVE::Storage::vdisk_free($cfg, $volid);
                }
            });
+
+           # delete vmstate files
+           # since after the restore we have no snapshots anymore
+           foreach my $snapname (keys %{$oldconf->{snapshots}}) {
+               my $snap = $oldconf->{snapshots}->{$snapname};
+               if ($snap->{vmstate}) {
+                   eval { PVE::Storage::vdisk_free($cfg, $snap->{vmstate}); };
+                   if (my $err = $@) {
+                       warn $err;
+                   }
+               }
+           }
        }
 
        my $map = {};
@@ -5753,6 +5920,17 @@ my $alloc_vmstate_volid = sub {
     return $volid;
 };
 
+my $snapshot_save_vmstate = sub {
+    my ($vmid, $conf, $snapname, $storecfg) = @_;
+
+    my $snap = $conf->{snapshots}->{$snapname};
+
+    $snap->{vmstate} = &$alloc_vmstate_volid($storecfg, $vmid, $conf, $snapname);
+    # always overwrite machine if we save vmstate. This makes sure we
+    # can restore it later using correct machine type
+    $snap->{machine} = get_current_qemu_machine($vmid);
+};
+
 my $snapshot_prepare = sub {
     my ($vmid, $snapname, $save_vmstate, $comment) = @_;
 
@@ -5773,12 +5951,12 @@ my $snapshot_prepare = sub {
            if defined($conf->{snapshots}->{$snapname});
 
        my $storecfg = PVE::Storage::config();
-       die "snapshot feature is not available" if !has_feature('snapshot', $conf, $storecfg);
+       die "snapshot feature is not available\n" if !has_feature('snapshot', $conf, $storecfg);
 
        $snap = $conf->{snapshots}->{$snapname} = {};
 
        if ($save_vmstate && check_running($vmid)) {
-           $snap->{vmstate} = &$alloc_vmstate_volid($storecfg, $vmid, $conf, $snapname);
+           &$snapshot_save_vmstate($vmid, $conf, $snapname, $storecfg);
        }
 
        &$snapshot_copy_config($conf, $snap);
@@ -5787,11 +5965,7 @@ my $snapshot_prepare = sub {
        $snap->{snaptime} = time();
        $snap->{description} = $comment if $comment;
 
-       # always overwrite machine if we save vmstate. This makes sure we
-       # can restore it later using correct machine type
-       $snap->{machine} = get_current_qemu_machine($vmid) if $snap->{vmstate};
-
-       update_config_nolock($vmid, $conf, 1);
+       write_config($vmid, $conf);
     };
 
     lock_config($vmid, $updatefn);
@@ -5827,7 +6001,7 @@ my $snapshot_commit = sub {
 
        $newconf->{parent} = $snapname;
 
-       update_config_nolock($vmid, $newconf, 1);
+       write_config($vmid, $newconf);
     };
 
     lock_config($vmid, $updatefn);
@@ -5906,7 +6080,7 @@ sub snapshot_rollback {
            delete $conf->{machine} if $snap->{vmstate} && !$has_machine_config;
        }
 
-       update_config_nolock($vmid, $conf, 1);
+       write_config($vmid, $conf);
 
        if (!$prepare && $snap->{vmstate}) {
            my $statefile = PVE::Storage::path($storecfg, $snap->{vmstate});
@@ -5966,6 +6140,17 @@ sub do_snapshots_with_qemu {
     return undef;
 }
 
+sub qga_check_running {
+    my ($vmid) = @_;
+
+    eval { vm_mon_cmd($vmid, "guest-ping", timeout => 3); };
+    if ($@) {
+       warn "Qemu Guest Agent are not running - $@";
+       return 0;
+    }
+    return 1;
+}
+
 sub snapshot_create {
     my ($vmid, $snapname, $save_vmstate, $comment) = @_;
 
@@ -5977,7 +6162,7 @@ sub snapshot_create {
 
     my $running = check_running($vmid);
 
-    my $freezefs = $running && $config->{agent};
+    my $freezefs = $running && $config->{agent} && qga_check_running($vmid);
     $freezefs = 0 if $snap->{vmstate}; # not needed if we save RAM
 
     my $drivehash = {};
@@ -6114,7 +6299,7 @@ sub snapshot_delete {
            }
        }
 
-       update_config_nolock($vmid, $conf, 1);
+       write_config($vmid, $conf);
     };
 
     lock_config($vmid, $updatefn);
@@ -6192,7 +6377,7 @@ sub template_create {
        my $voliddst = PVE::Storage::vdisk_create_base($storecfg, $volid);
        $drive->{file} = $voliddst;
        $conf->{$ds} = print_drive($vmid, $drive);
-       update_config_nolock($vmid, $conf, 1);
+       write_config($vmid, $conf);
     });
 }