« Rev
@ru_zfs   666
Fwd »


Andrey
в 1,5 и быстрый replace
Вадим «Дым» Илларионов ☭
Надёжность в 1 диск ?🤔
Ага! То есть, даже не фкурске, как оно работает?.. Ща покажу.
Georg🎞️🎥
Ага! То есть, даже не фкурске, как оно работает?.. Ща покажу.
Да, покажите , как переживает вылет двух дисков из одного зеркала 👌
Andrey
кстати помню лет 5 назад рейды в СХД начали из чанков делать, а не их дисков
Andrey
чето не видно движение этого в opensource
Вадим «Дым» Илларионов ☭
Да, покажите , как переживает вылет двух дисков из одного зеркала 👌
А догадайся по такому: root@psql-0:~# zpool status pool: rpool state: ONLINE scan: scrub repaired 0B in 00:04:26 with 0 errors on Sun Sep 10 00:28:27 2023 config: NAME STATE READ WRITE CKSUM rpool ONLINE 0 0 0 mirror-0 ONLINE 0 0 0 ata-INTEL_SSDSC2KB019T8_PHYF203502K21P9DGN-part3 ONLINE 0 0 0 ata-INTEL_SSDSC2KB019T8_PHYF203502JZ1P9DGN-part3 ONLINE 0 0 0 mirror-1 ONLINE 0 0 0 ata-INTEL_SSDSC2KB019T8_PHYF203502EQ1P9DGN-part3 ONLINE 0 0 0 ata-INTEL_SSDSC2KB019T8_PHYF203502FB1P9DGN-part3 ONLINE 0 0 0 mirror-2 ONLINE 0 0 0 ata-INTEL_SSDSC2KB019T8_PHYF203502K31P9DGN-part3 ONLINE 0 0 0 ata-INTEL_SSDSC2KB019T8_PHYF203502NV1P9DGN-part3 ONLINE 0 0 0 mirror-3 ONLINE 0 0 0 ata-INTEL_SSDSC2KB019T8_PHYF203502N01P9DGN-part3 ONLINE 0 0 0 ata-INTEL_SSDSC2KB019T8_PHYF203502CN1P9DGN-part3 ONLINE 0 0 0 errors: No known data errors
Vladislav
в 1,5 и быстрый replace
В русскую рулетку хотите поиграть?
Вадим «Дым» Илларионов ☭
Можно и поболе. Но не нужно. :)
Vladislav
В русскую рулетку хотите поиграть?
Я сам конечно использовал 16 зеркал на старой работе, но у меня и бэкапы были и данные это просто лаба коллег
Вадим «Дым» Илларионов ☭
Я так не понимаю , я вэб краб (((
Сорян, но здесь не кафедра по рейдострою и не по рейдопохоронам.
Andrey
так то стильно смотрелось
Вадим «Дым» Илларионов ☭
почему?
Чревато боком. Когда один из чанков на накопителе ведёт к замене этого накопителя без учёта других (здоровых) чанков, тем самым выводя ВЕСЬ рейд в ранг мертвецов. Разве не очевидно?..
Georg🎞️🎥
Сорян, но здесь не кафедра по рейдострою и не по рейдопохоронам.
Не совсем понял ваш «высер» А если вы не можете доступно объяснить , стало быть и не разбираетесь в вопросе собственно 👋
Вадим «Дым» Илларионов ☭
Не совсем понял ваш «высер» А если вы не можете доступно объяснить , стало быть и не разбираетесь в вопросе собственно 👋
Умилительно читать столь "глубокие" эмо-заключения от раздельноглазых обитателей глубин паутины. :)
Vladislav
У тебя умирает диск
Andrey
Чревато боком. Когда один из чанков на накопителе ведёт к замене этого накопителя без учёта других (здоровых) чанков, тем самым выводя ВЕСЬ рейд в ранг мертвецов. Разве не очевидно?..
не видел процесс выпадения данных на них. Но звучит как то странно. Чанк выпал - битый диск, диск в offline - запускаем перестроение без учета этого диска на основе свободного места в пуле. Ну это такто логично - в обычно рейде также происходит при ошибке на диске
Vladislav
Либо происходит ошибка чтения чанка, но тогда восстанавливается ЧАНК, а ячейка диска где был этот чанк помечается как мёртвая
Vladislav
и записывается новый чанк в живую ячейку диска
Vladislav
кстати помню лет 5 назад рейды в СХД начали из чанков делать, а не их дисков
Это просто лишний слой абстракции и не особо он помогает, когда ты не контролируешь собственно диски и что это за диски
Vladislav
И сложно реализуем Это удобно для вендоров, потому что это а) вендор лок дополнительный б) перестроение рейда действительно получается быстрее, потому что у тебя свободное пространство размазано по всем дискам и вместо изнасилования одного HotSpare у тебя просто растёт нагрузка на запись на всех дисках
Вадим «Дым» Илларионов ☭
Либо происходит ошибка чтения чанка, но тогда восстанавливается ЧАНК, а ячейка диска где был этот чанк помечается как мёртвая
Только если запасных секторов хватает. Почему этот пунктик выпадает у тех, кто не застал винты без самрта и резерва?..
Vladislav
Только если запасных секторов хватает. Почему этот пунктик выпадает у тех, кто не застал винты без самрта и резерва?..
???????? Вы ведь в курсе, что у Enterprise диска запасных секторов обычно x2-х3 их ёмкости?
Вадим «Дым» Илларионов ☭
Честно — нет. Откуда инфа? Нахрена так много?
Andrey
Это просто лишний слой абстракции и не особо он помогает, когда ты не контролируешь собственно диски и что это за диски
так то в жизни мы тоже уже немного контролируем. да и в работе. Взять бы хотябы nodejs разработчиков
Вадим «Дым» Илларионов ☭
/report
Andrey
Плюсов у данного решения в том что тебе проще создавать массивы с требуемой отказоустойчивостью и также убивать их
Andrey
ну и ребилд на порядок быстрее имхо
Vladislav
Честно — нет. Откуда инфа? Нахрена так много?
Некоторые диски поддерживают overprosioning, который позволяет сделатть из 1.92ТБ диска - 3.84 путём сильно сокращения его DWPD
Вадим «Дым» Илларионов ☭
Плюсов у данного решения в том что тебе проще создавать массивы с требуемой отказоустойчивостью и также убивать их
Тогда я лучше продолжу бояться и строить рейдв на железных накопителях, а не их огрызках.
Vladislav
Скажите, пожалуйста, речь про ssd ?
Да, у HDD надо смотреть вендорский даташит сколько у них там запасных секторов, и СМАРТ
Вадим «Дым» Илларионов ☭
Скажите, пожалуйста, речь про ssd ?
Есть срах, что с ТТНами всё ещё хуже.
░▒▓
/report
Vladislav
А СМАРТ давно ли в вендорлоки протиснулся?
? Я про то, что диски контролируются вендором и он, с помощью кастомных прошивок, получает дополнительную информацию о состоянии диска. К примеру, у Хувы буквально стоит ARM проц в каждом диске, который отруливает статуса ячеек
Georg🎞️🎥
Есть срах, что с ТТНами всё ещё хуже.
Разноглазость не позволяет мне быть уверенным в том, что я верно понял написанное вами , вы о чем, простите ?👋
Вадим «Дым» Илларионов ☭
Некоторые диски поддерживают overprosioning, который позволяет сделатть из 1.92ТБ диска - 3.84 путём сильно сокращения его DWPD
Тем более на проде лучше переплачу, нежели так подставлюсь. Даже и дома... У меня 12 НЖМД под игрухи с серьёзным запасом по резерву. Но списаны давно — оттого мне с провайдерской помойки, считай, и отошли: там критично, а мне пох. Но растягивать всяк кондом на винт до полного разрыва не рискну.
f1gar0
#Вопрос есть pve + zfs на samsung u2 nmve ssd. При развертке делал ashift=12 стандартный. Сейчас буду собирать кластер на ~ 90tb на 3-х нодах pve, в виду чего углубился в мелочи, в спецификации на сайте самсунга указано что размер кластера 4kb, fdisk показывает 512. Может на опыте кто подскажет какой ashift ставить на данные диски. А также какой arc free, на нодах по 1tb ram
Andrey
Тогда я лучше продолжу бояться и строить рейдв на железных накопителях, а не их огрызках.
ну почему бояться, просто не так удобно как обещали. Есть у тебя 8 дисков в массиве: ты или рейд6 можешь сделать или рейд 5 или все под рейд 10. А в чанковом рейде что угодно и в любом количестве
Vladislav
Из 8 сдать 16 можно ?😱 :)) вот это было б приятно ))
Я бы не рекомендовал, но если вендорская утилита есть, то можете покрутить namespace size
Georg🎞️🎥
Я бы не рекомендовал, но если вендорская утилита есть, то можете покрутить namespace size
Видел винты с бешенный ресурсом, который в моих делах не нужен , а вот доп емкость очень даже 😱 Не нужно мне 3 раза в день его перезаписывать 5 лет ))
Вадим «Дым» Илларионов ☭
Разноглазость не позволяет мне быть уверенным в том, что я верно понял написанное вами , вы о чем, простите ?👋
Я о том, что ТТНы куда сильней подвержены через паршивки контролю вендора, чем даже НЖМДшники.
Vladislav
ну почему бояться, просто не так удобно как обещали. Есть у тебя 8 дисков в массиве: ты или рейд6 можешь сделать или рейд 5 или все под рейд 10. А в чанковом рейде что угодно и в любом количестве
Это кстати ещё одна причина, почему в opensource нет этого. Там пиздец сложные алгоритмы какие чанки с каких дисков для каких рейдов брать
Vladislav
И нужен прямо доступ до диска, а люди всё ещё цепляют SSD\HDD через рейды для ZFS
Вадим «Дым» Илларионов ☭
Твердотельный накопитель - человек просто боится фразы SSD
Зачем боится? Мож, я про твердотопливные нагнетатели... Так себе из вас интерпретатор. :)
Vladislav
Зачем боится? Мож, я про твердотопливные нагнетатели... Так себе из вас интерпретатор. :)
Зачем Вы используете термин который не является распространённым?
Вадим «Дым» Илларионов ☭
Зачем вы используете ССД вместо SSD? Давайте сраться уже на родном языке!😃
Vladislav
И нет, ТТН не является официальном сокращением Твердотельный накопитель, так как твердотельный это одно слово
Вадим «Дым» Илларионов ☭
И нет, ТТН не является официальном сокращением Твердотельный накопитель, так как твердотельный это одно слово
И снова пох, поскольку ССД вообще не имеет никаких оправданных раскрытий этой аббревиатуры. :)
Vladislav
И снова пох, поскольку ССД вообще не имеет никаких оправданных раскрытий этой аббревиатуры. :)
И является общепринятым термином За сим спам про Ваши специфичные вкусы в наименованиях заканчиваем
Вадим «Дым» Илларионов ☭
...среди малообразованных в родном языке. :)
Vladislav
...среди малообразованных в родном языке. :)
Ок, клоундадить можно во флуде продолжать Раз с первого раза не понятно было - Ок, клоундадить можно во флуде продолжать https://t.me/sds_flood
Вадим «Дым» Илларионов ☭
И является общепринятым термином За сим спам про Ваши специфичные вкусы в наименованиях заканчиваем
А давайте и вы фитиль своей вкусовщины прикрутите?... :)
Fedor
А давайте без холиваров)
f1gar0
на 4кб ориентируйся, 512 возможно эмуляция, не относящаяся к нормальной работе
Т.е. верим припискам. А по поводу arch xTB=xGB ram + 1GB ram или ?)
Вадим «Дым» Илларионов ☭
Я и не нарывался. Меня прижучивать пытались. Не вышло — могут примьютить. Или за баню. :)
Andrey
к тому же этим на лету можно управлять
Andrey
Т.е. верим припискам. А по поводу arch xTB=xGB ram + 1GB ram или ?)
mvme читал где то что вообще не бывает 512 физически, типа память организована не менее 4кб
f1gar0
mvme читал где то что вообще не бывает 512 физически, типа память организована не менее 4кб
В течение нескольких десятилетий в большинстве дисков использовались секторы по 512 байт. В последнее время большинство дисков настроено на сектора 4 КиБ, а в некоторых — особенно SSD — сектора 8 КиБ или даже больше. с хабра
Andrey
а все пишут 512!
Вадим «Дым» Илларионов ☭
а все пишут 512!
Это ещё МБР же и прочие языческие верования...
f1gar0
а все пишут 512!
На забугорном форуме видел плачи ярославны про samsung evo860 и йопсы на ashift=12 и конский прирост производительности на ashift=9***
« Rev
@ru_zfs   666
Fwd »