Более быстрые варианты дисков

 Бывает, что нужно много IOPS, и/или очень много пропускной способности, и нам на помощь приходит NVME. Многие знают его по слоту m.2 на материнках, но также есть "внешние" варианты NF1 и более "привычный" формат U.2

Описание формата

https://habr.com/ru/company/kingston_technology/blog/369729/

Примеры:

U.2

https://www.supermicro.com/en/products/system/1U/1029/SYS-1029U-TN10RT.cfm

NF1

https://nvme.smb-solution.ru/supermicro-1029p-nmr36l-32x-nvme-nf1/

Пара обзоров SSD технологий

SSD: подвиды и перспективы
PCIe SSD, подвиды и будущее

Оптимизация работы на SSD-накопителе рабочей станции с Fedora Linux

Оптимизация работы на SSD-накопителе рабочей станции с Fedora Linux

PCI-E SSD Intel SSD 910

Intel® Solid-State Drive 910 Series: No Spin. All Grin.

Intel SSD 910 Series Enterprise PCIe Review - хороший обзор, много картинок, сравнение с другими подобными платами.
Возможности PCI-E SSD Intel 910
The Intel SSD 910 Review
Intel SSD 910

4 канала, которые можно собирать в разных режимах, и LSISAS2008 как контроллер. Но 400Гб стоит около $2k. При этом скорость до 80к иопс при латенси менее 1мс.
Особенность: в версии 400Гб только 2 NAND модуля, а в 800Гб - 4, поэтому скорости будут х2.

SAS контроллеры

thg: Обзор и тест четырёх контроллеров SAS 6 Гбит/с

Выбор RAID-контроллера

У LSI есть интересная технология CacheCade Pro 2.0, где подключаются SSD как кэш чтения, и сам  контроллер кэширует наиболее часто читаемые данные.

"Карта Adaptec автоматически распознаёт то, что она называет конфигурацией HybridRaid, которая состоит из смеси жёстких и SSD-дисков, предлагая RAID на уровнях от 1 до 10 в такой конфигурации. Эта карта превосходит своих конкурентов благодаря специальным алгоритмам чтения/записи. Они автоматически направляют операции чтения на SSD, а операции записи и на жёсткие диски, и на SSD. Таким образом операции чтения будут работать как в системе только из SSD, а запись будет работать не хуже, чем в системе из жёстких дисков."

Достаточно интересная серия контроллеров LSI MegaRAID SAS 9240-4i или LSI MegaRAID SAS 9260-4i
SAS9211-8I
IBM ServeRAID M5014 = LSI 9260-8i (1 2)
IBM ServeRAID M1015 = LSI 9220-8i (HBA) (3 4)

SSD серверного назначения

Обычно стоят сильно дороже бытового сегмента, но обладают бОльшей наработкой на отказ. Обычно на SLC, но сейчас появляется всё больше на eMLC.

Из наиболее известных - intel x25-e, на SLC, уже снятый с производства.

Известная серия FusionIO - ставится в pci-e, очень быстрые, но очень дорогие диски.
Первый взгляд на Fusion-IO ioDrive2 плюс комменты.

Про intel 710 уже было

http://habrahabr.ru/qa/24271/#answer_99211
Надежность — 520 интел.
Скорость — 4 вертекс.
Бюджетность — круциал.

На nix.ru есть тестирование:
http://www.nix.ru/hardware-review/ssd-benchmark-performance.html
...где практически на всех дисках в описании "Невозможно использование в серверах из-за недостаточного ресурса", что основано на технологии их чипов памяти. Хотя опять же, в роли кэша чтения жить они будут нормально.


У 520 интела (да и у многих других ссд) есть нюанс: чем больше объём, тем выше скорость (iops). Это связано с тем, что микросхемы памяти там ставятся параллельно, и внутри диска будет несколько одновременных каналов работы. И чем больше микросхем, тем больше каналов можно задействовать (до лимита чипа, обычно 10 каналов), поэтому отличия 60 и 180гб моделей по иопс примерно в 3 раза.. а вот дальше уже роста скорости почти нет.

(потом дополню еще моделями)

правда и заблуждения о долговечности SSD

Kingston HyperX 3K: правда и заблуждения о долговечности SSD

Складывается ощущение, что даже с 3к-ячейками эти диски долговечны... Тем не менее, многие дают на такие диски гарантию всего год, причём если у диска выработан полностью ресурс (!) -- это уже не гарантийный случай (!!). Ну и вспоминаем SLC с ресурсом в 100к записей на ячейку.

А сложно ли выработать этот ресурс? На самом деле - несложно. И даже если исключить серверную сферу, где такой диск можно "съесть" за месяц, банально windows 7 + мало памяти + swap на таком диске - работать будет неплохо.. но довольно недолго. Не месяц конечно, но год это будет уже очень хорошо.
Поэтому эти диски хороши там, где много чтения и мало записи - кэш чтения, система без свопа, фильмы, игрушки...

SSD-контроллеры

http://www.3dnews.ru/storage/618144?top-articles-block

О контроллерах SandForce и твердотельных приводах на его основе мы писали уже не раз. Фактически добрую половину раздела «Накопители» за последние полгода составляют материалы, описывающие SandForce во всех его проявлениях. Что поделать, если продукт этой молодой компании буквально оккупировал рынок массовых SSD на MLC-микросхемах. Вот и еще один представитель большого семейства, Kingston HyperX.

типы SSD

http://www.dell.com/downloads/global/products/pvaul/en/Solid-State-Drive-FAQ-us.pdf

Сейчас есть 3 основных типа:
SLC
MLC
eMLC

Эпическое тестирование 15 SSD объемом 120-128 Гбайт

Эпическое тестирование 15 SSD объемом 120-128 Гбайт

И оттуда же основные типы контроллеров:
Для начала разберемся с основными платформами, на которых строятся SSD. Подавляющее большинство дисков сейчас делают на контроллерах SandForce SF-2281 и Marvell 88SS9174. Свой собственный контроллер использует Samsung в приводах серии SSD 830. OCZ не так давно тоже начала выпускать накопители с контроллерами «домашнего» производства Indilinx Everest и Everest 2. Ну и не будем забывать о платформе Intel, которая играла значительную роль в эпоху накопителей для шины SATA 2 Гбит/с и пиком развития которой стала линейка Intel SSD 320. До современных стандартов Intel ее не дотянула и теперь вместе со всеми для производства топовых накопителей прибегает к услугам SandForce и Marvell.

Intel SSD 710: обзор и тест SSD на технологии HET MLC

На замену x25-e серии интел выводит 710 серию, которая на MLC чипах. Что изменилось, обзор:
http://www.thg.ru/storage/obzor_intel_ssd_710/print.html

А вкратце - взяли 320гиг диск, откусили 40% под ремапы и резерв, обозвали это HET MLC, что не более чем простой маркетинг, и несколько изменили прошивку. Так что долговечность выше обычных MLC (за счет резервирования), но в остальном - та же деградация со временем, ресурс всё-равно ниже, на активных операциях есть провалы при работе чистилки мусора.
В общем, интел снова падает "в низы", видимо чтобы не создавать конкуренцию партнёрам, как с серверами например, которые "дёшево и сердито". В low-end нормально, выше или ничего нет, или отстой какой-то.

Хотя обещались выпустить 720 серию в формате платы в PCI-e, посмотрим что выйдет.

ssd cache

SSD можно использовать как кэш для классических HDD без дорогих аппаратных контроллеров. Программные решения:
— модуль ядра Flashcache от Facebook
— ZFS L2Arc

https://github.com/facebook/flashcache/

SSD: Что о них нужно знать

http://pc-help.tomsk.ru/forum/viewtopic.php?f=1&t=2826

...
Код E1 – Host Writes
This attribute reports the total number of sectors written by the host system. The raw value is increased by 1 for every 65,536 sectors written by the host. Use the Raw value for this attribute.
«Этот атрибут показывает, сколько всего записано данных на диск»


Код E9 – Media Wearout Indicator
This attribute reports the number of cycles the NAND media has experienced.
The normalized value declines linearly from 100 to 1 as the average erase cycle count increases from 0 to the maximum rated cycles.
Once the normalized value reaches 1, the number will not decrease, although it is likely that significant additional wear can be put on the device. Use the Normalized value for this attribute.
«Этот атрибут показывает, сколько здоровья осталось у диска»
...

Для SLC интеля (Х25-Е на 32 гига) при Е1=22Тб Е9=99
то есть записать он сможет что-то около 2 петабайт.
Надо понять, как мониторить эти поля в линухе..

SSD на FreeBSD 8.1

Поставил под ДБ SSD Intel X25-E 32G, 2 в зеркало.
Вообще, скорость должна быть под 200мб/с с диска.


Странности.
# dd if=/dev/ad20 of=/dev/null
^C579642+0 records in
579642+0 records out
296776704 bytes transferred in 54.388418 secs (5456616 bytes/sec)
# dd if=/dev/ad20 of=/dev/null bs=1M count=1024
1024+0 records in
1024+0 records out
1073741824 bytes transferred in 6.819674 secs (157447676 bytes/sec)
# dd if=/dev/ad20 of=/dev/null bs=1G count=4
4+0 records in
4+0 records out
4294967296 bytes transferred in 25.157709 secs (170721719 bytes/sec)

Вот такая ерунда. Зависит от размера блока?
# dd if=/dev/ad20 of=/dev/null bs=4k
^C112856+0 records in
112856+0 records out
462258176 bytes transferred in 9.776836 secs (47280959 bytes/sec)
#dd if=/dev/ad20 of=/dev/null bs=16k
^C50850+0 records in
50850+0 records out
833126400 bytes transferred in 10.191321 secs (81748618 bytes/sec)
# dd if=/dev/ad20 of=/dev/null bs=512
^C156910+0 records in
156910+0 records out
80337920 bytes transferred in 10.382522 secs (7737804 bytes/sec)

На закуску:
# dd if=/dev/mirror/gm-var of=/dev/null bs=1G count=1
1+0 records in
1+0 records out
1073741824 bytes transferred in 10.394644 secs (103297604 bytes/sec)

Пойду думать. И еще, что делать с TRIM, которое 8 фря не умеет, а в 9 обещали только при форматировании (насколько я помню). Плюс ZFS пока не планирует TRIM, насколько я видел в гугле.