edo1
дайте название вашего серверного ССД. Я вам по спекам покажу что он не может быть быстрее оптана
ещё бы в спеках писали все интересные цифры ))) на заре ssd-строения intel писала почти всё, но всё равно не всё; а сейчас не пишет
edo1
щас вам картинкой дам)
да что мне картинка, если я на реальной системе вижу реальные задержки. и в тестовом стенде с линухом и fio тоже их видел ))
Сергей
сравнивайте
Сергей
edo1
ну вот тест показывает обратное )
Alexander
ну вот тест показывает обратное )
а вы тестите сырые девайсы?
edo1
https://docs.google.com/spreadsheets/d/1E9-eXjzsKboiCCX-0u0r5fAjjufLKayaut_FOPxYZjc/edit?hl=en#gid=0
Alexander
просто такого быть не может)
edo1
вот тут по journal iops optane отличный результат показывает, но не лучший
Сергей
ну вот тест показывает обратное )
у меня тесты показывали на обычном 900p лучше чем на samsung datacenter. Я не говорю про 48XX или 5XXX
Сергей
edo1
по чтению — да, на голову лучше всех
edo1
я оптаны ценю не за их скорость, а за их latency.
а это разве не одно и то же? )))) iops=qd/latency, я всегда так думал ))))
Сергей
покажите мне хотя бы один ссд с латенси на запись 5us
Сергей
сравнивайте
не одно и тоже. Тут иопсов много, а латенси высокая
edo1
так в формуле ещё qd есть ))))
Владимир
не одно и тоже. Тут иопсов много, а латенси высокая
ну потому что это они иопсы показывают в кучу потоков
Владимир
с хорошим латенси можно получить много иопсов даже в один поток))
edo1
покажите мне хотя бы один ссд с латенси на запись 5us
это вы 5800x смотрите? да, на них я тоже облизываюсь, но думаю, что pci-e 4 накопители за счёт быстрого контроллера будут показывать задержку записи не больше. wb творит чудеса )
edo1
https://forum.ixbt.com/topic.cgi?id=66:9010:4853#4853 текущее поколение у меня 12мкс выдаёт. optane не сохранил, но больше
edo1
ну и скриншот с работающей винды я привёл, разница почти в два раза не в пользу optane.
Сергей
ну и скриншот с работающей винды я привёл, разница почти в два раза не в пользу optane.
у меня zfs на nvme + slog на оптан показывает более высокую производительность на синхронную запись, чем без такого slog.
edo1
в общем, под slog надо брать любой dc ssd ИЛИ optane
Сергей
а какой nvme?
samsung pm983 1.9Tb
Александр
у меня либо intel dc 3ххх диски, либо вот Micron 5300 взяли на пробу
Александр
но еще один просто некуда вставить, и не в бюджете
edo1
samsung pm983 1.9Tb
не должно быть большой разницы
Сергей
не должно быть большой разницы
есть разница. По даташиту у самсунга 50us на случайной записи https://gzhls.at/blob/ldb/2/b/4/9/d8f8e423e0134a3f116548621be52b49a323.pdf
edo1
табличка выше была
edo1
у меня в хозяйстве есть, цифры подтверждаю
edo1
вообще задержки по опыту зависят и от машины ещё
Сергей
интересно было бы увидеть конкретные цифры
если найду архивы по тестам fio - выложу. Сейчас уже нет доступа к этой машине
edo1
у меня ЕМНИП оптан выдавал в однопотоке 20-30мкс что на чтение, что на запись
edo1
хорошие dc nvme выдают в два раза больше на чтение и в два раза меньше на запись
Сергей
и вряд ли могло помочь. Это дало бы эффект для синхронной записи, а у вас скорее всего запись внутри виртуалки асинхронная. Поможет только выставление параметров кэширования для ВМки. Типа writeback, но нужно иметь ввиду что это "опасное" кэширование и при крэше хоста есть риски повреждения данных внутри ВМки
Сергей
погодите, у вас джава приложения прямо на хосте запущены или в контейнерах?
Сергей
тогда мой совет не подойдёт, он для виртуалок
Сергей
и ссд совсем никакого нет? даже на 30-50Гб?
Сергей
хотя если sync=disabled не помог, то и ссд не помогут
George
Уточните нагрузку, асинхронная/синхронная запись, размер блока доступа, какой размер данный, какой размер ОЗУ под arc выделен
George
xattr=sa, atime=off стандартные оптимизации
George
если sync=disabled картину не меняет, то синхронной записи мало
d
Как определяете занятость?
d
Забыл как htom но вообще нормально иметь 0 свободной памяти
d
Если не 0 то либо недавно стартанули либо ошибка конфигурирования
George
arcstat смотрите для статистики по zfs и arc_summary
edo1
Какой средний размер файла? Файл пишется целиком?
edo1
Я запутался, у вас виртуализация или нет?
edo1
Прямо на хосте, контейнеров нет
edo1
для ntfs есть рекомендации ? )
George
Прямо на хосте, контейнеров нет
кажется, это разные Иваны)
edo1
Вот я хотел написать )
edo1
для ntfs есть рекомендации ? )
Отформатировать с размером кластера равным volblocksize, я так думаю.
George
оч странно, у меня отображаются разными учётками
edo1
Он шутит, наверное А может быть троллит )))
edo1
Я уже разобрался
edo1
Привык текст читать, не обращая внимание на значки
central
по моему такой себе способ для среднего размера
Ivan
нет раные )
Ivan
я мимокрокодил и решил узнать нет ли рекомендаций каких для ntfs.
edo1
Так какой характер нагрузки?
edo1
И какие жалобы?
edo1
так в iostat чтений почти нет )
edo1
а покажите просто iostat -mxz 10 (без zpool)
edo1
ну и чтения нет, и диски не особо нагружены
edo1
по iostat загрузка процессора около трети )
edo1
маловероятно
edo1
можете чётко сформулировать проблему?
Egor
привет, друзья! на сервере нужно поменять диск ada3 в рейде. раньше с заменой не сталкивался. правильная последовательность? zpool offline ada3p3 <заменяем физический диск> zpool replace ada3p3
Egor
так он вроде уже оффлайн
да, уже выключил его. меня беспокоило, можно ли диск вытаскивать после перевода в офлайн
Egor
получилось, заменяется. спасибо!
nagual
лишнего, увы, нет
Да можно хоть по USB новый подкинуть, bsd не капризна.