Немного маразма от supermicro

Где-то про..теряли несколько рельс (rails) под корпус типа SC-813, решили заказать новые. И началась веселуха: официально есть 3 модели рельс

Рельсовые Крепления

MCP-290-00052-0N-BULK MCP-290-00054-0N MCP-290-00056-0N

- - -

25.6" to 33.05" outer rail, quick, для 1U 17.2" W chassis (10 sets/pack) 25.6" to 33.05" rail set, quick/quick, для 1U 17.2" W chassis 19" to 26.4" outer rail, quick, для 1U 17.2" W chassis

(краткий пересказ - первое это комплект из 10 длинных рельс, второе - просто длинные, третье - короткие, под мелкие стойки)
813 и 815 по рельсам совместимы.
http://www.supermicro.ru/products_spec_942.html

А теперь веселуха. Именно под указанными партномерами что-либо найти проблематично, зато тьма предложений по "комплектному" партномеру, например CSE-PT52L. А тут становится ещё веселее, так как они бывают PT51(L) и PT52(L), то есть до 4 моделей. И даже у реселлера микры - Depo - они в итоге были заказаны как PT52L. И похоже, что 51 и 52 несовместимы.
Вот такие пироги.

проброс SuperMicro IP KVM на удаленный хост

http://jskyworker.blogspot.ru/2013/02/no-ikvm64-in-javalibrarypath-supermicro.html

SuperMicro IP KVM: no iKVM64 in java.library.path

Суть в том, что для supermicro IPMI требуется java web start, но почему-то просто JRE ему мало, нужен icedtea
sudo apt-get install icedtea-netx

Но после подключения и попытки запросить консоль можно поймать
no iKVM64 in java.library.path
Сохраняем  launch.jnlp на диск и вносим изменения в секции:
<resources os="Linux" arch="amd64"> и <resources os="Linux" arch="x86_64">, перед </resources> вписать
<property name="jnlp.packEnabled" value="true"/>
<property name="jnlp.versionEnabled" value="true"/>

<j2se version="1.6.0+" initial-heap-size="96M" max-heap-size="128M"/>

После этого должно нормально запускаться, проверим

javaws launch.jnlp

Линки
http://jskyworker.blogspot.ru/2013/02/no-ikvm64-in-javalibrarypath-supermicro.html
http://blog.coffeebeans.at/?p=83
http://www.hackerway.ch/2013/01/28/how-to-resolve-no-ikvm64-in-java-library-path-error-ubuntu-x64-12-04-lts/

habr: Восстановление прошивки RAID-контроллеров LSI

Восстановление прошивки RAID-контроллеров LSI

SuperMicro Battery Backup Power (BBP)

http://www.supermicro.nl/products/nfo/BBP.cfm

dell и supermicro

Ко многим серверам dell можно подобрать аналоги у супермикры, например для R420:
2.5"
http://www.supermicro.nl/products/system/1U/1027/SYS-1027B-URF.cfm
или версия с 1 БП
http://www.supermicro.nl/products/system/1U/1027/SYS-1027B-MTF.cfm

3.5"
http://www.supermicro.nl/products/system/1U/6017/SYS-6017B-URF.cfm
http://www.supermicro.nl/products/system/1U/6017/SYS-6017B-MTRF.cfm

Плюс SAS контроллер.

Под R620 вариантов больше, но тут уже надо сравнивать параметры, например там половина моделей заточена под установку GPU, и сложнее с выбором мощности БП.

У dell основные преимущества это pro support, в том числе исправление неполадок за 4 часа на месте.

LSi 2008 - замена прошивки

ftp://ftp.supermicro.com/driver/SAS/LSI/2008/
Выбираем нужную версию
iMR - Поддержка raid5, но поскольку чип слабый, можно подключить мало дисков.
IR - raid
IT - HBA
Часть плат поставляются с iR стеком, можно прошить в iMR при наличии аппаратного ключа iButton или в IT стек

Есть пример с картинками
http://www.servethehome.com/howto-flash-supermicro-x8si6f-lsi-sas-2008-controller-lsi-firmware/
Вообще интересный сайт.
Ещё
http://true-system.blogspot.com/2011/07/lsi-9211-48i-it.html

Особенности работы с ipmi на supermicro

http://www.supermicro.com/manuals/other/Embedded_BMC_IPMI.pdf
http://www.supermicro.com/manuals/other/Onboard_BMC_IPMI.pdf

LAN Interface
This feature allows the user to select which port to use for IPMI out-of-band communication.
• The default setting is Failover, which will allow IPMI to be connected from either
the shared LAN port (LAN1/eth0) or the dedicated IPMI LAN port. Precedence
is given to dedicated LAN port over the shared LAN port.
• Select "Dedicated LAN" for IPMI to connect through the IPMI Dedicated LAN
port at all time.
• Select "Shared LAN" for IPMI to connect through the LAN1 port on the board

Переключение:
web-интерфейс: Configuration->Lan Select->Dedicated LAN
В IPMIView: на вкладке BMC Setting.

Проверил работу на подручной микре: режим failover, запустил пинг и вынул патчкорд из ipmi-интерфейса. Потерялся 1 пакет, но дальше пинги снова пошли. Поставил патчкорд назад, немного подождал, вынул кабель из lan1 - ни одного пакета не потерялось, значит переключило назад.
НО! говорят, есть особенность: если подать напряжение на сервер, в который сетевые кабели пока не воткнуты (или перезагрузили стойку и свич пока грузится, погасив все порты) -- независимо от выставленного режима ipmi будет работать только на lan1. ipmitool bmc reset cold не поможет. Решение - полностью выключить сервер, обесточить, проверить, что в ipmi есть кабель на работающий свич, подать питание.
Столкнулся с этой проблемой, весьма неприятно получилось.
UPD Возможно, это был баг, который уже поправили в свежих прошивках. Нет лишней железки для проверки.

UPD2: переключение режимов
Посмотреть какой режим сейчас установлен можно так ipmitool -l -lanplus raw 0x30 0x70 0xc 0 0 0

Default (failover): you will see 00 00
Dedicated LAN: you will see 01 00
Onboard LAN: you will see 01 01


Изменить можно так:

Set Dedicated LAN:
Ipmitool -l -lanplus raw 0x30 0x70 0xc 1 1 0

Set Onboard LAN1
Ipmitool -l -lanplus raw 0x30 0x70 0xc 1 1 1

Set Failover(default setting)
Ipmitool -l -lanplus raw 0x30 0x70 0xc 1 0 0

И рестартануть БМЦ

http://www.supermicro.com/support/faqs/faq.cfm?faq=9848

отсюда

Подключаем новый сервер c ipmi

Настраивал новую плату с ipmi (X8SI6-F), там есть ipmi

Подключил к сети. Штатно оно получит адрес по dhcp, но можно задать адрес в биосе. Изменять настройки можно или с диска (не проверял, возможно надо в /makedisk/makedisk.exe сделать загрузочный диск), или поставить OpenIPMI (в биосе нашёл только изменение айпи, но не пользователей), через ipmicfg, или через IPMI View. Если это делать удалённо - логин-пароль:
ADMIN:ADMIN
Через OpenIPMI - после установки появится ipmitool, про настройку сети через него есть у меня в заметках. С добавлением пользователя - копать в сторону

# ipmitool user list
ID  Name             Enabled Callin  Link Auth  IPMI Msg   Channel Priv Limit
2   ADMIN            false   true    false      false      Unknown (0x00)

# ipmitool user
User Commands: summary [<channel number>]
                   list    [<channel number>]
                   set name     <user id> <username>
                   set password <user id> [<password>]
                   disable      <user id>
                   enable       <user id>
                   priv         <user id> <privilege level> [<channel number>]
                   test         <user id> <16|20> [<password]>

Впрочем, можно получить
# ipmitool lan print 1
Could not open device at /dev/ipmi0 or /dev/ipmi/0 or /dev/ipmidev/0: No such file or directory
Get Channel Info command failed

Не загрузился ipmi-модуль.
# modprobe ipmi_devintf
Почему оно не грузится автоматом (как во фре), непонятно.

Можно добавить ipmievd (из OpenIPMI) в загрузку - ipmievd - IPMI event daemon for sending events to syslog

PS Неплохой обзор этой платы
http://www.servethehome.com/supermicro-x8si6-f-motherboard-review-including-onboard-lsi-sas-2008-controller/

True System: IPMI, KVM-over-LAN, virtual media в серверах Supermicro - удаленное управление и мониторинг

True System: IPMI, KVM-over-LAN, virtual media в серверах Supermicro - удаленное управление и мониторинг

True System: OEM SAS контроллеры в серверах Supermicro

True System: OEM SAS контроллеры в серверах Supermicro