Друзья, прошу помощи.
Только поставил Proxmox 3.4 не успел порадоваться, как заметил неприятный момент.
Создал хранилище ZFS на нем создаются образы и все чудесно работает, но вот если создаю образ диска в каталоге, не важно IDE/SATA/SCSI/VIRTIO, при запуске у меня вот такая ошибка и ВМ не стартует:
kvm: -drive file=/backup/VM/images/103/vm-103-disk-1.vmdk,if=none,id=drive-ide0,format=vmdk,aio=native,cache=none,detect-zeroes=on: file system may not support O_DIRECT
kvm: -drive file=/backup/VM/images/103/vm-103-disk-1.vmdk,if=none,id=drive-ide0,format=vmdk,aio=native,cache=none,detect-zeroes=on: could not open disk image /backup/VM/images/103/vm-103-disk-1.vmdk: Could not open '/backup/VM/images/103/vm-103-disk-1.vmdk': Invalid argument
TASK ERROR: start failed: command '/usr/bin/kvm -id 103 -chardev 'socket,id=qmp,path=/var/run/qemu-server/103.qmp,server,nowait' -mon 'chardev=qmp,mode=control' -vnc unix:/var/run/qemu-server/103.vnc,x509,password -pidfile /var/run/qemu-server/103.pid -daemonize -smbios 'type=1,uuid=9626e997-d9c7-4abf-970a-44b9f7cb7fd1' -name sdfg -smp '1,sockets=1,cores=1,maxcpus=1' -nodefaults -boot 'menu=on,strict=on,reboot-timeout=1000' -vga std -no-hpet -cpu 'kvm64,hv_spinlocks=0xffff,hv_relaxed,+lahf_lm,+x2apic,+sep' -m 2048 -k en-us -cpuunits 1000 -device 'piix3-usb-uhci,id=uhci,bus=pci.0,addr=0x1.0x2' -device 'usb-tablet,id=tablet,bus=uhci.0,port=1' -device 'virtio-balloon-pci,id=balloon0,bus=pci.0,addr=0x3' -iscsi 'initiator-name=iqn.1993-08.org.debian:01:95cabe8c34d7' -drive 'file=/var/lib/vz/template/iso/SW_DVD5_Win_Pro_10_32BIT_Russian_MLF_X20-25753.ISO,if=none,id=drive-ide2,media=cdrom,aio=native' -device 'ide-cd,bus=ide.1,unit=0,drive=drive-ide2,id=ide2,bootindex=200' -drive 'file=/backup/VM/images/103/vm-103-disk-1.vmdk,if=none,id=drive-ide0,format=vmdk,aio=native,cache=none,detect-zeroes=on' -device 'ide-hd,bus=ide.0,unit=0,drive=drive-ide0,id=ide0,bootindex=100' -netdev 'type=tap,id=net0,ifname=tap103i0,script=/var/lib/qemu-server/pve-bridge,downscript=/var/lib/qemu-server/pve-bridgedown' -device 'e1000,mac=76:D1:DE:01:D5:54,netdev=net0,bus=pci.0,addr=0x12,id=net0,bootindex=300' -rtc 'driftfix=slew,base=localtime' -global 'kvm-pit.lost_tick_policy=discard'' failed: exit code 1
Я читать умею и могу понять что система не может открыть образ диска, но вопрос почему?!
Подскажите, как с этим бороться?
Пробовал подсунуть образы дисков от VMWare и VirtualBox(переконвертируя) но все равно не видит диск.
Права посмотри.
На весь путь, мб qemu например под nobody или libvirt-qemu работает (не помню как оно у proxmox) и нет прав на траверс промежуточных "папок".
>[оверквотинг удален]
> -device 'ide-hd,bus=ide.0,unit=0,drive=drive-ide0,id=ide0,bootindex=100' -netdev
> 'type=tap,id=net0,ifname=tap103i0,script=/var/lib/qemu-server/pve-bridge,downscript=/var/lib/qemu-server/pve-bridgedown'
> -device 'e1000,mac=76:D1:DE:01:D5:54,netdev=net0,bus=pci.0,addr=0x12,id=net0,bootindex=300'
> -rtc 'driftfix=slew,base=localtime' -global 'kvm-pit.lost_tick_policy=discard''
> failed: exit code 1
> Я читать умею и могу понять что система не может открыть образ
> диска, но вопрос почему?!
> Подскажите, как с этим бороться?
> Пробовал подсунуть образы дисков от VMWare и VirtualBox(переконвертируя) но все равно не
> видит диск.cache=writeback поможет?
>[оверквотинг удален]
>> 'type=tap,id=net0,ifname=tap103i0,script=/var/lib/qemu-server/pve-bridge,downscript=/var/lib/qemu-server/pve-bridgedown'
>> -device 'e1000,mac=76:D1:DE:01:D5:54,netdev=net0,bus=pci.0,addr=0x12,id=net0,bootindex=300'
>> -rtc 'driftfix=slew,base=localtime' -global 'kvm-pit.lost_tick_policy=discard''
>> failed: exit code 1
>> Я читать умею и могу понять что система не может открыть образ
>> диска, но вопрос почему?!
>> Подскажите, как с этим бороться?
>> Пробовал подсунуть образы дисков от VMWare и VirtualBox(переконвертируя) но все равно не
>> видит диск.
> cache=writeback поможет?Помогло.
Спасибо.
Сейчас буду продолжать экспериментировать.
>[оверквотинг удален]
>>> failed: exit code 1
>>> Я читать умею и могу понять что система не может открыть образ
>>> диска, но вопрос почему?!
>>> Подскажите, как с этим бороться?
>>> Пробовал подсунуть образы дисков от VMWare и VirtualBox(переконвертируя) но все равно не
>>> видит диск.
>> cache=writeback поможет?
> Помогло.
> Спасибо.
> Сейчас буду продолжать экспериментировать.работа с образами - не эффективна в плане I/O.
Вот почему используют LVM или ZFS/ZVOL
>[оверквотинг удален]
>>>> диска, но вопрос почему?!
>>>> Подскажите, как с этим бороться?
>>>> Пробовал подсунуть образы дисков от VMWare и VirtualBox(переконвертируя) но все равно не
>>>> видит диск.
>>> cache=writeback поможет?
>> Помогло.
>> Спасибо.
>> Сейчас буду продолжать экспериментировать.
> работа с образами - не эффективна в плане I/O.
> Вот почему используют LVM или ZFS/ZVOLда да. Я уже заметил:( Подвешивается вся виртуозка:(
Подскажите, а можно образ как-то перенести в ZFS?
У меня собрано зеркало из 2-х терабайтных винтов: zfs create zvolume mirror disk1 disk2
Подскажете как?
А хотя нет. Сейчас посмотрел:
Имею Хранилище на ZFS обозванное VirtualMashines
А диск у меня не как образ: VirtualMashines:vm-100-disk-1
Но все равно по IO затыкается.
А в консоли при этом: http://puu.sh/jOTkJ/4d59e92ce7.pngКак начинаю копировать большие файлы, так все,п приехали:(
Я уже и ops/s установил и на чтение и на запись в 200 и 5МБ/сек на чтение и 4МБ/сек на запись. Но все равно затыкается.
>[оверквотинг удален]
> Подскажете как?
> А хотя нет. Сейчас посмотрел:
> Имею Хранилище на ZFS обозванное VirtualMashines
> А диск у меня не как образ: VirtualMashines:vm-100-disk-1
> Но все равно по IO затыкается.
> А в консоли при этом: http://puu.sh/jOTkJ/4d59e92ce7.png
> Как начинаю копировать большие файлы, так все,п приехали:(
> Я уже и ops/s установил и на чтение и на запись в
> 200 и 5МБ/сек на чтение и 4МБ/сек на запись. Но все
> равно затыкается.А Вы уверены в том что поняли смысл:
1) использование ZFS/ZVOL в качестве образа для VM
2) использование LVM вместо образов для VMПри использовании ZFS, желательно оттюнить, как минимум:
- RAM
- L2ARC on SSD
- ZIL on SSDДля LVM этого не требуется.