Друзья, здравствуйте, от добра добра не ищут, но а я попробовал.Был у меня дома сервер на microitx материнке на atom 450 с 2гб памяти. Присоединено было туда 4 диска. 2 штуки по 3 тб. 2 штуки по 1 тб. Все это в LVM и 1 raid попарно.
Крутился там nextcloud transmission gitlab и куча всякого всякого . Крутилось вполне сносно, мои и семейные нужды вполне себе обеспечивало.
Но тут подогнал мне на одной пьянке друг плату от dl180g6 с 2 процессорами. Памяти регистровой на 64 гигабайта я насобирал по родственникам и доволmный собой устроил переезд.
А радости не случилось. На новой плате дисковая подсистема настолько медленно работает, что я просто слезы лью. Добавил sata ssd lvm cache на 480гб, думал, лучше станет. А нет.
По логам все норм. Даже куда копать не знаю.
[root@s31 ~]# hdparm -tT /dev/sda/dev/sda:
Timing cached reads: 11578 MB in 2.00 seconds = 5800.08 MB/sec
Timing buffered disk reads: 326 MB in 3.05 seconds = 106.75 MB/sec
[root@s31 ~]# hdparm -tT /dev/sdb/dev/sdb:
Timing cached reads: 12010 MB in 2.00 seconds = 6012.94 MB/sec
Timing buffered disk reads: 426 MB in 3.01 seconds = 141.72 MB/sec
[root@s31 ~]# hdparm -tT /dev/sdc/dev/sdc:
Timing cached reads: 11686 MB in 2.00 seconds = 5850.53 MB/sec
Timing buffered disk reads: 310 MB in 3.01 seconds = 103.09 MB/sec
[root@s31 ~]# hdparm -tT /dev/sdd/dev/sdd:
Timing cached reads: 11890 MB in 2.00 seconds = 5953.06 MB/sec
Timing buffered disk reads: 466 MB in 3.01 seconds = 154.70 MB/secсейчас такие данные по дискам.
последний ssd
при этом все они включаются как sata 2
grep -i SATA /var/log/messages | grep --color -i 'link up'
Apr 19 13:10:20 s31 kernel: ata1: SATA link up 3.0 Gbps (SStatus 123 SControl 300)
Apr 19 13:10:20 s31 kernel: ata3: SATA link up 3.0 Gbps (SStatus 123 SControl 300)
Apr 19 13:10:21 s31 kernel: ata4: SATA link up 3.0 Gbps (SStatus 123 SControl 300)
Apr 19 13:10:21 s31 kernel: ata6: SATA link up 3.0 Gbps (SStatus 123 SControl 300)и ssd то по чтению мог бы быть побыстрее у hdparm.
Беда просто. Не знаю, что делать.
и реально стоит начать по сети копировать файл гигов на 15 как la за 15 и система (такое ощущение) что просто останавливается
Может в музей его отнести? Ладно, шучу.Рейд силами LVM? Или mdraid и поверх него уже VG? Я бы в первую очередь подумал на рейд. Вдруг он развалился и восстанавливается? Во вторую заглянул бы в дмесг, там могут быть какие-нибудь ошибки.
> Может в музей его отнести? Ладно, шучу.
> Рейд силами LVM? Или mdraid и поверх него уже VG? Я бы
> в первую очередь подумал на рейд. Вдруг он развалился и восстанавливается?
> Во вторую заглянул бы в дмесг, там могут быть какие-нибудь ошибки.dmesg не показывает ничего касаемо дисков.
все как обычно
raid синхронен. все нормально.
mdadm поверх него lvm + ssd lvm cache
> Друзья, здравствуйте, от добра добра не ищут, но а я попробовал.
> Был у меня дома сервер на microitx материнке на atom 450 с
> 2гб памяти. Присоединено было туда 4 диска. 2 штуки по 3
> тб. 2 штуки по 1 тб. Все это в LVM и
> 1 raid попарно.
> Крутился там nextcloud transmission gitlab и куча всякого всякого . Крутилось вполне
> сносно, мои и семейные нужды вполне себе обеспечивало.
> Но тут подогнал мне на одной пьянке друг плату от dl180g6
> с 2 процессорами. Памяти регистровой на 64 гигабайта я насобирал по
> родственникам и доволmный собой устроил переезд.диски не изменились, сменилась материнка и контроллеры sata.
проблема видна?
>[оверквотинг удален]
>> 2гб памяти. Присоединено было туда 4 диска. 2 штуки по 3
>> тб. 2 штуки по 1 тб. Все это в LVM и
>> 1 raid попарно.
>> Крутился там nextcloud transmission gitlab и куча всякого всякого . Крутилось вполне
>> сносно, мои и семейные нужды вполне себе обеспечивало.
>> Но тут подогнал мне на одной пьянке друг плату от dl180g6
>> с 2 процессорами. Памяти регистровой на 64 гигабайта я насобирал по
>> родственникам и доволmный собой устроил переезд.
> диски не изменились, сменилась материнка и контроллеры sata.
> проблема видна?Вы предполагаете, что проблемные контроллеры или материнка?
СПАсибо. попробую сменить
>>[оверквотинг удален]
>>> Но тут подогнал мне на одной пьянке друг плату от dl180g6
>>> с 2 процессорами. Памяти регистровой на 64 гигабайта я насобирал по
>>> родственникам и доволmный собой устроил переезд.
>> диски не изменились, сменилась материнка и контроллеры sata.
>> проблема видна?
> Вы предполагаете, что проблемные контроллеры или материнка?
> СПАсибо. попробую сменитьВы пишите только про материнку и ни слова про корпус-шасси, контроллеры...
Логика проста:
- заменили плату, cpu, ram
- диски остались те же
Вывод:
- интегрированные контроллеры на плате
или
- проблема с шиной
или
- внешние контроллеры
или
- кабель
или
- backplane если у вас шасси
или
- не хватает мощи БП
...
Начать стоит с обновления FW платы, BMC, NIC и raid контроллера до крайних версий.
У НР DL 160 G6 дисковую подсистему можно строить либо на встроенном SATА, либо на P410 контроллере. В случае построения RAID на P410 нужен raid кэш (256Mb/512Mb/1Gb) + питание к нему. Ну и к самому серверу есть куча утилит диагностики от НР.
> Начать стоит с обновления FW платы, BMC, NIC и raid контроллера до
> крайних версий.
> У НР DL 160 G6 дисковую подсистему можно строить либо на встроенном
> SATА, либо на P410 контроллере. В случае построения RAID на P410
> нужен raid кэш (256Mb/512Mb/1Gb) + питание к нему. Ну и к
> самому серверу есть куча утилит диагностики от НР.у меня sata контроллер , не p410
> у меня sata контроллер , не p410Значит осталось "насобирать по родственникам" на P410/420 чтобы устроенный "переезд" не разбился об устаревший "энтерепрайз", дури которого для soho ф-помойки / качалки и остального должно хватить за глаза.
В плане экспериментов можно временно отказаться от RAID, перейти на JBOD и провести тесты на скорость.
>[оверквотинг удален]
> Timing buffered disk reads: 310 MB in 3.01 seconds = 103.09
> MB/sec
> [root@s31 ~]# hdparm -tT /dev/sdd
> /dev/sdd:
> Timing cached reads: 11890 MB in 2.00 seconds =
> 5953.06 MB/sec
> Timing buffered disk reads: 466 MB in 3.01 seconds = 154.70
> MB/sec
> сейчас такие данные по дискам.
> последний ssdя думало что умею до пяти считать... ну ладно.
а цифры как для hdd на sata2 абсолютно нормальные.