storage : add volume_snapshot

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

bump version to 2.0-31

nexenta: fix lun number parsing in sub path

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

nexenta: ssl option is optionnal

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

nexenta: add ssl option and clean errors handling

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

nexenta : add nodes and disable options

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

sheepdog : add nodes and disable options

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

rbd: add nodes and disable options

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

bump version to 2.0-30

nexenta: volume_resize

resize volume using nexenta api. (online or offline).

we can't use qmp block_resize with libiscsi to online update disk size in guest (throw error), so return undef;

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

sheepdog : volume_resize

use collie command to resize disk (online or offline).

we can't use qmp block_resize to online resize size in guest (throw error) , so return undef.

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

rbd : volume_resize

resize disk with rbd command if vm is offline
otherwise we can use qmp block_resize if vm is online

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

ISCSIDirect : volume_resize

die as we can't resize scsi device plugins

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

ISCSIPlugin : volume_resize

die as we can't resize iscsi devices

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

lvmplugin : volume_resize

resize the lvm device (online or offline)

return 1 to use qmp block_resize to online update size in guest

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

plugins : add volume_resize

this add qemu-img resize for file devices (raw - qcow2) if vm is offline.

otherwise we need to use online qmp block_resize

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

Storage : add global volume_resize

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

ISCSIDirect : volume_size_info

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

ISCSIDirect : fixes and cleanup

-use "lunX" for volume name.
previously it was only the lun number, and it conflict with current syntax to disk alloc disk size.

-scsi-ls return size in Gb, so we need to convert to bytes

-small cleanups

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

nexenta: volume_size_info

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

rbd : volume_size_info

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

sheepdog : volume_size_info

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

ISCSIPlugin : remove specific volume_size_info

no need to use volume_size_info, we can use generic volume_size_info from Plugin. (file_size_info)

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

bump version to 2.0-29

use rpcinfo instead of Ping

This works for NFS servers behind firewalls.

move check_connection into activate_storage

volume_size_info: make it work with raw devices

bump version to 2.0-28

nexentaplugin : volume_size_info

return nothing for now.

This also avoid de call soap api each time in sub path.

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

rbdplugin: volume_size_info

return nothing for now

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

sheepdogplugin: volume_size_info

return nothing for now

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

iscsidirectplugin : volume_size_info

return nothing for now

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

iscsiplugin:volume_size_info

return nothing for now, as we can't get volume used inside the volume, stats are empty.

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

add volume_size_info for generic plugin

this use path and file_size_info like before

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

add volume_size_info sub

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

fix lvmscan

catch exception

bump version to 2.0-26

iscsi: add check_connection

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

nfs: add check_connection

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

add check_connection in storage_check_enabled.

Currently, if a storage have an infinite timeout (nfs hard option or iscsi with high timeout for failover),
and if the storage is down or is doing ha failover with dual controller

- pvestatd hang on storage_info. (So pve-manager see the host as down, and hang on differents parts, gui,rrds display)

- pvedaemon hang on differents place (storage disk list,vm_status, hardware info,...)

- I also see a lot of qemu-img info process hanging in uninterruptible sleep state with iscsi storage.

This patch add a check to see if the storage is accessible.

For nfs and iscsi : ping with a timeout of 2 second.  (Maybe this can be polish with some kind of filesystem/storage read test with timeout...)

Default for other storage plugins is to check nothing. (not a problem with sheepdog,ceph,libiscsi... as commands have timeout)

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

bump version to 2.0-25

re-add hack for empty pool

fresh created and empty rbd pool, throw a 500 error with "pool xxx doesn't contain rbd images" message.

fix sheepdog path

We always need to specify a port, else kvm does not find the disk.

cleanup rbd driver

register all plugins

bump version to 2.0-22

cleanup white space errors

add nexenta plugin

storage definition
------------------
portal 192.168.0.1
target iqn.1986-03.com.sun:....
login myloginwithjsonpermission
password jsonuserpassword
pool Yourpool
blocksize 4K

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

add iscsidirect plugin

This use libiscsi

storage definition:
------------------
portal 192.168.0.1
target iqn.1986-03.com.sun:....

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

sheepdog: implement storage status

delete trailing white spaces

sheepdog: use '-r' to get sizes in bytes, code cleanup

Use a common method collie_cmd() to assemble command using
correct server/port settings.

register sheepdog plugin

bump version to 2.0-21

add sheepdog plugin

storage definition
-------------------
portal 127.0.0.1:7000

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

set shared=1 to sheepdog plugin

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

fix offline migration bug

Alway pass volname and storeid to plugin->path()

rbd : add owner attribute when rbs ls

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

rbd : use keyring file instead keyfile

we need 1 keyring by rbd storage

/etc/pve/priv/ceph/storagename.keyring

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

add newline to error message

rbd : rbd_ls: doesn't throw error if pool doesn't contain image

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

rbd : set shared as default

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

rados block plugin update

config file
-----------
rbd: rbdtest
        monhost 10.3.94.27:6789;10.3.94.28:6789;10.3.94.29:6789
        pool pool2
        username admin
        authsupported cephx;none
        content images

key for user admin must be specified in:
---------------------------------------
/etc/pve/priv/ceph/storeid.username.key

/etc/pve/priv/ceph/rbdtest.admin.key   for this exemple.

(so we can have multiple users key by storage and multiple storage with same username)

I change "sub path" in Storage.pm to pass $storeid as third argument.

I rename property id to username, to be more clear.

removal of rbd_ prefix.

removal of trailing whitespace

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

Add rados block plugin storage

This add rados plugin storage.

We need rbd command from ceph repository (ceph-common package) to create/delete volumes,I didn't have add depends for the moment.

/etc/pve/storage.cfg sample config

rbd: rbdtest
        rbd_monhost 10.3.94.27:6789;10.3.94.28:6789;10.3.94.29:6789
        rbd_pool pool2
        rbd_id admin
        rbd_key AQAmOcZPwNY7GRAAuvJjVAKIm1r3JKqLCa4LGQ==
        rbd_authsupported cephx;none
        content images

Signed-off-by: Alexandre Derumier <aderumier@odiso.com>

fix return value for path()

import run_command

use File::Path

use Sockets

update version to 2.0-19

new plugin architecture

avoid call to lvs when deactivating devices

Because this can be slow if there are many devices.

fix bug #171: fix path_to_volume_id for unmounted NFS

fix bug #148: set maxfiles for default local storage

use dir_glob_* from PVE::Tools

add line break to error message

allow to set option 'maxfiles'

use Digest::SHA instead of Digest::SHA1

new lvm option 'saferemove' to zero-out data when removing LVs

zero-ot data on LVM volumes

delete volume requires Datastore.Allocate

only list iscsi when enabled (content == images)

update version to 2.0-10

also list tar.gz and tar.lzo backup files

fix upload permissions. Only allow iso/tmpl upload.

parse backup files and return owner vmid

use correct package prefix

moved format definition to pve-common

add permission checks

allow optional slash in mount path

Seems NFS4 use that smetimes

use -e to test if volume exists

Because rootdir is a directory, not a file

update version to 2.0-8

fix iscsi size bug

ignore errors from vgs

improve error messages

do not activate LVM volumes with vgchange -aly

fix bug 44: allow to store vztmpl on NFS

improved container support (rootdir)

update version to 2.0-5

allow container rootdir on NFS