https://www.opennet.ru/openforum/vsluhforumID1/95638.html Здравствуйте. Пытаюсь сделать загрузочное зеркало из двух usb-флешек. Флешки обычные, ничего особенного:[code]May 31 07:47:28 vmstor kernel: da0 at umass-sim0 bus 0 scbus3 target 0 lun 0<br>May 31 07:47:28 vmstor kernel: da0: &lt;UFD 3.0 Silicon-Power16G PMAP&gt; Removable Direct Access SCSI-6 device<br>May 31 07:47:28 vmstor kernel: da0: Serial Number P1312160070B3C53D05D7171<br>May 31 07:47:28 vmstor kernel: da0: 40.000MB/s transfers<br>May 31 07:47:28 vmstor kernel: da0: 15120MB (30965760 512 byte sectors: 255H 63S/T 1927C)<br>May 31 07:47:28 vmstor kernel: da0: quirks=0x2&lt;NO_6_BYTE&gt;[/code]<br>Если делать scrub пула из одной флешки (без зеркала), то всё замечательно:[code] scan: scrub in progress since Sat May 31 08:36:45 2014<br> 461M scanned out of 2,87G at 25,6M/s, 0h1m to go<br> 0 repaired, 15,71% done[/code]<br>Но когда я делаю attach второй флешки в зеркало, то начинается ужас:[code] scan: resilver in progress since Sat May 31 07:49:55 2014<br> 242M scanned out of 2,87G at 122K/s, 6h17m to go<br> 2 https://www.opennet.ru/openforum/vsluhforumID1/95638.html#21 Fri, 04 Jul 2014 15:15:05 GMT &gt;&gt; Перед продакшеном сделайте опять тестирование скорости-записи мелких файлов и выложите <br>&gt;&gt; сюда.<br>&gt; флешки от пула отцеплять уже не буду, но скорость записи мелких блоков <br>&gt; после покупки мерял с помощью "dd of=/dev/zero of=/dev/da8 bs=512" и она <br>&gt; была 2.5 мегабайта в секунду, что по сравнению со скоростью флешки <br>&gt; из первого сообщения просто великолепно.<br>&gt;&gt; И выложите rc.conf, rc.local, loader.conf (с XXX.XXX.XXX.XXX реальными ip, если есть).<br>&gt;&gt; Чтоб последователи понимали логику.<br>&gt; ничего особенного там нет.<br><br>Сомнительные значения:<br><br>&gt;kern.maxusers="2048"<br><br>256 или 512 вам с головой хватит.<br><br>&gt;font8x14="cp866-8x14"<br>&gt;font8x16="cp866b-8x16"<br>&gt;font8x8="cp866-8x8"<br>&gt;keymap="ru.koi8-r"<br>&gt;scrnmap="koi8-r2cp866"<br><br>лучше utf-8 кодировку использовать.<br> https://www.opennet.ru/openforum/vsluhforumID1/95638.html#20 Fri, 04 Jul 2014 04:48:18 GMT &gt; Перед продакшеном сделайте опять тестирование скорости-записи мелких файлов и выложите <br>&gt; сюда.<br><br>флешки от пула отцеплять уже не буду, но скорость записи мелких блоков после покупки мерял с помощью "dd of=/dev/zero of=/dev/da8 bs=512" и она была 2.5 мегабайта в секунду, что по сравнению со скоростью флешки из первого сообщения просто великолепно.<br><br>&gt; И выложите rc.conf, rc.local, loader.conf (с XXX.XXX.XXX.XXX реальными ip, если есть). <br>&gt; Чтоб последователи понимали логику.<br><br>ничего особенного там нет.<br>/boot/loader.conf:[code]autoboot_delay="3"<br>loader_logo="beastie"<br>geom_mirror_load="YES"<br>coretemp_load="YES"<br>zfs_load="YES"<br>kern.maxusers="2048"<br>net.inet.tcp.syncache.hashsize=1024<br>net.inet.tcp.syncache.bucketlimit=100<br>net.inet.tcp.tcbhashsize=4096<br>hw.igb.rxd=4096<br>hw.igb.txd=4096<br>kern.ipc.semmnu=1024<br>kern.ipc.semmni=1024<br>kern.ipc.semmap=1024<br>zfs_load="YES"<br>kern.cam.boot_delay=10000<br>kern.cam.scsi_delay=10000<br>vfs.zfs.prefetch_disable=1<br>vfs.root.mountfrom="zfs:zstick"[/code]<br>/etc/rc.conf:[ https://www.opennet.ru/openforum/vsluhforumID1/95638.html#19 Thu, 03 Jul 2014 18:37:45 GMT &gt;&gt; Не оформите PR - никто не узнает об этой проблеме.<br>&gt; зарегался, начал оформлять и наткнулся на решение: https://bugs.freebsd.org/bugzilla/show_bug.cgi?id=167685 <br>&gt; - попробовал, помогло. и Вам, universite, спасибо за то, что толкнули <br>&gt; меня туда. проблема решена.<br>&gt; теперь моя "Нищебродская СХД" (с) pavlinux будет грузиться с usb флешек, на <br>&gt; которых zfs.<br><br>Перед продакшеном сделайте опять тестирование скорости-записи мелких файлов и выложите сюда.<br>И выложите rc.conf, rc.local, loader.conf (с XXX.XXX.XXX.XXX реальными ip, если есть).<br>Чтоб последователи понимали логику.<br><br>На хабре еще можно опубликовать статью.<br> https://www.opennet.ru/openforum/vsluhforumID1/95638.html#18 Thu, 03 Jul 2014 18:22:50 GMT &gt; теперь моя "Нищебродская СХД" (с) pavlinux будет грузиться с usb флешек, на которых zfs.<br><br>в этом интернете где то грустит маленький павлинукс :) Погладь кота что ли :)<br><br>PS: Молодец что не сдался, такие люди нам нужны!(С)<br> https://www.opennet.ru/openforum/vsluhforumID1/95638.html#17 Thu, 03 Jul 2014 18:19:06 GMT &gt;&gt;&gt; Поставь Linux, Фря - это детская поделка для офисных роутеров и прокладка <br>&gt;&gt;&gt; для апача.<br>&gt;&gt; а у линукса zfs в ядре появилось?<br>&gt; Нищебродская СХД? Не нету. Чо ещё?<br><br>Там нет тебя, а это всё остальное перевешивает :)<br> https://www.opennet.ru/openforum/vsluhforumID1/95638.html#16 Thu, 03 Jul 2014 10:03:27 GMT &gt; Не оформите PR - никто не узнает об этой проблеме.<br><br>зарегался, начал оформлять и наткнулся на решение: https://bugs.freebsd.org/bugzilla/show_bug.cgi?id=167685 - попробовал, помогло. и Вам, universite, спасибо за то, что толкнули меня туда. проблема решена.<br><br>теперь моя "Нищебродская СХД" (с) pavlinux будет грузиться с usb флешек, на которых zfs.<br> https://www.opennet.ru/openforum/vsluhforumID1/95638.html#15 Wed, 02 Jul 2014 17:29:53 GMT &gt;[оверквотинг удален]<br>&gt; версия всё та же, что и в первом посте: FreeBSD 10.0-STABLE #0 <br>&gt; r266463: Tue May 20 18:24:03 UTC 2014 <br>&gt;&gt;&gt; если убрать zvol, или грузиться не с usb-флешек, а с обычного винта <br>&gt;&gt;&gt; или винтов, что с zfs, что с ufs, то глюк пропадает.<br>&gt;&gt; Оформите PR - https://bugs.freebsd.org/bugzilla/enter_bug.cgi <br>&gt;&gt; Там с USB и ACPI материнок хватает проблем.<br>&gt; всегда стеснялся писать в pr то, что выглядит как подземный стук и <br>&gt; на виртуальном окружении тоже непонятно как проверить. писать сейчас в pr <br>&gt; такое - это нормально? сервер пора уже отправлять в production, экспериментировать <br>&gt; с ним дальше уже не смогу, даже если pr кто-то подцепит. <br><br>Не оформите PR - никто не узнает об этой проблеме.<br><br><br> https://www.opennet.ru/openforum/vsluhforumID1/95638.html#14 Wed, 02 Jul 2014 17:21:28 GMT &gt; версия FreeBSD? uname -a <br><br>версия всё та же, что и в первом посте: FreeBSD 10.0-STABLE #0 r266463: Tue May 20 18:24:03 UTC 2014<br><br>&gt;&gt; если убрать zvol, или грузиться не с usb-флешек, а с обычного винта <br>&gt;&gt; или винтов, что с zfs, что с ufs, то глюк пропадает.<br>&gt; Оформите PR - https://bugs.freebsd.org/bugzilla/enter_bug.cgi <br>&gt; Там с USB и ACPI материнок хватает проблем.<br><br>всегда стеснялся писать в pr то, что выглядит как подземный стук и на виртуальном окружении тоже непонятно как проверить. писать сейчас в pr такое - это нормально? сервер пора уже отправлять в production, экспериментировать с ним дальше уже не смогу, даже если pr кто-то подцепит.<br> https://www.opennet.ru/openforum/vsluhforumID1/95638.html#13 Wed, 02 Jul 2014 16:51:08 GMT &gt; universite, Вы оказались абсолютно правы. купил sandisk extreme и всё заработало как <br>&gt; надо, но обнаружился другой досадный глюк, который, впрочем, был и на <br>&gt; предыдущих флешках тоже, но до этого я не обратил на него <br>&gt; внимания :( <br>&gt; после создания zvol в zpool из обычных жёстких дисков на команду reboot <br>&gt; или shutdown компьютер реагирует так: http://farm6.staticflickr.com/5506/14550830655_d517ab28f5_b.jpg <br>&gt; и висит. реагирует только на кнопку на корпусе.<br><br>версия FreeBSD? uname -a<br><br><br>&gt; если убрать zvol, или грузиться не с usb-флешек, а с обычного винта <br>&gt; или винтов, что с zfs, что с ufs, то глюк пропадает. <br><br>Оформите PR - https://bugs.freebsd.org/bugzilla/enter_bug.cgi<br><br>Там с USB и ACPI материнок хватает проблем.<br><br>