имхо быстрее с разных дисков по-кусочку читать, чем один большой с одного )

я бы в 1 vg несколько pv засунул и всё

и поверх один lv

если бы диски были ssd...))

ssd там тоже есть, но под эту задачу места жалко)

а при чём тут ssd?

на ssd сидит postgres, в который инфа по этим картинкам будет заливаться

парралельное чтение с нескольких дисков быстрее, чем с одного потом с другого потом стретьего

оно быстрее если надо большой файл считать последовательно

а там дохрена random iops... мне кажется что stripe на двух дисках тут будет в 4 раза медленнее, чем если два диска использовать по отдельности

хотя может я конечно укурился и спать пора уже...

)))

Имхонадо считать iops носителей, и твою загрузку по ilps сначала

В любом случае, одновременное чтение с нескольких дисков быстрее, иопсить каждый диск меньше надо

iops носителей примерно по 400, загрузить легко на 10к+, объем чтения не большой (в большинстве случаев только заголовок надо считать), проц тоже курит) жестких требований к скорости нет, но всё равно диски дрочить в пустую не хочется)

А сколько носителей?

сейчас - 4... будет надо скорость можно дисков добавить и кеш на ssd чуток прикрутить...

Ну вот смотри 1600 iops max

Какогоразмера заголовок?

<1kb

А диски sas?

часто >512

нет, обычные 7200)

А размер сегмента 4k или 512 у дисков?)

Сектора

Ну допустим 512

Диск /dev/sdd: 3,7 TiB, 4000787030016 байт, 7814037168 секторов Единицы: секторов по 1 * 512 = 512 байт Размер сектора (логический/физический): 512 байт / 4096 байт Размер I/O (минимальный/оптимальный): 4096 байт / 4096 байт

блин...

Ну кароче за 1 iops читаем 4k

А размер lvm extenda надо поглядеть

Ну кароче на 1 iops 4k

Заголовок умещается

Представим, что max 1600 iops

Остальное ляжет в очередь

Я про холодные данные

А горячие из файлового кеша читаться будут

Еще можно размер страницы fs поглядеть)

Файловый кеш из оперативки в ядре

короче ясно, ты прав, можно не париться и делать страйп)

Я бы ваще ничо не делал

А сделал кеширующий ssd

К кешу файловому воперативке

В ядре

Можно сделать lvm cache

На ssd

Купил бы какой-нить маленький по размеру но быстрый ssd

На mlc

если б оно ещё работало норм, на одном разделе есть, по моему опыту оно обычно вместо того чтобы последовательно на hdd из кеша данные вытеснять начинает его жестко насиловать... на 10кк файлов сохранить по одному блоку - 40Гб если оптимистично?.. сможет ли вообще оно хоть примерно к такому само прийти если правда только заголовки читать?.. надо потестить...

тьфу, еще директории...

На hdd из кеша?

Мы ведь про чтение говорим

угу, в этом случае правда лучше должно быть...

там запись активная была...

и в целом оно себя оправдало)

Хорошие raid контроллеры ssd cache + собственным кешем большим на борту рулят

но когда в мониторинге IOPS на hdd уходит в пик после завершения процесса наливки это странно))

Это нормально

Сначала пишется в кеш

Потом из кеша на хдд

диски трещат при этом жесть)

Лучше, чем процесс будет ждать пока все физически запишется

да понятно)

я года два назад btier пробовал, он как-то поспокойнее был, чтоли

Wtf?

https://sourceforge.net/projects/tier/files/

хз заведется он на новых ядрах или нет... вроде должен...

кажется я с ним тогда пару паник словил... вроде из за этого и отказался... но не помню уже точно...

ERROR: S client not available

хотя в целом оно неплохо поработало

оно вроде блоки скидывает по расписанию, и если кончилась ssd - сразу на hdd пишет, минуя кеш... ну и оно там не кеш совсем, а просто "умный jbod"

копит статистику, а потом по ней оптимизирует

А, ну т.е. рейда и отказоустойчивости нет совсем?

предполагается что его используют over отказоустойчивый raid

Не понял

Кто кого исптл зует

ну делаешь raid1 из hdd'шек, делаешь raid1 из ssd'шек, и из двух получившихся массивов собираешь btier

Га

Гы

ну да)

Чтт только люди не придумают, лишь бы норм рейд-контроллеры с большим набортным кешем и отдельным кешем под ssd не юзать)

если за единицу отказа взять сервер то имеет право на жизнь)

Не имеет)

Вытащил контроллер с дисками, переставил - работай даььше

Все данные в кеше рейда

Мы говорим про отказоустойчивость + производительность)

ок) про сервер херню несу) ну и в целом понятно что с нормальным рейдом всё проще)

хотя "проще" наверно тоже с оговорками)

ох, нафлудили...

Все, спать!

❗СОВЕТУЮ СРАЗУ ПОДПИСАТЬСЯ, ИЛИ ДОБАВИТЬ В ЗАМЕТКИ СЕБЕ❗ - Восстановление сим-карт под QIWI, карты, соц.сети и пр. "Обговаривается" - Пробив местоположения через сим "погрешность 10-20 метров" - Пробив данных "ФИО и паспортные данные" - Детализация до 6 месяцев - Восстановление МТС, Билайн, Магафон, ТЕЛЕ2. "Стоимость зависит от номера" - Закрытые тарифы. Их очень много "Это те самые тарифы о которых Вы мечтали" - Сим-карты "только оптом" пустые/с балансом "МТС, Билайн, Магафон, ТЕЛЕ2" - Красивые номера, также подбор собственных вариантов. - Устройство для активации sim ❗ Также есть услуги по WhatsApp и Viber❗ ❗"Такое есть только в ФСБ Подробно в ЛС!❗ ❗ЭТО НЕ ВСЕ УСЛУГИ❗ ❗МОЖНО ПРАКТИЧЕСКИЙ ВСЕ, В ЛС❗ ❗ПЕРЕЙДИ НА КАНАЛ, ЧТОБЫ ДОБАВИТЬ КОНТАКТЫ❗ ?СКОРО БУДЕТ АКТУАЛЬНА НОВАЯ УСЛУГА:? Пробив по-базам регионов РФ и ЗАРУБЕЖЬЯ: - Пробив информации по МВД - Пробив информации по ФНС - Пробив информации по ФМС - Пробив информации по ССП - Пробив информации по ПФР - Пробив информации по БКИ - И многое другое... ?Пока-что тестируем ? Завели тему на форуме - https://goo.gl/qo4CTH Уже имеются отзывы ? ?❗Писать только сюда : Tony_Mantony❗? ?❗ОСНОВНОЙ КАНАЛ - Telemag_RF❗?

❗СОВЕТУЮ СРАЗУ ПОДПИСАТЬСЯ, ИЛИ ДОБАВИТЬ В ЗАМЕТКИ СЕБЕ❗ - Восстановление сим-карт под QIWI, карты, соц.сети и пр. "Обговаривается" - Пробив местоположения через сим "погрешность 10-20 метров" - Пробив данных "ФИО и паспортные данные" - Детализация до 6 месяцев - Восстановление МТС, Билайн, Магафон, ТЕЛЕ2. "Стоимость зависит от номера" - Закрытые тарифы. Их очень много "Это те самые тарифы о которых Вы мечтали" - Сим-карты "только оптом" пустые/с балансом "МТС, Билайн, Магафон, ТЕЛЕ2" - Красивые номера, также подбор собственных вариантов. - Устройство для активации sim ❗ Также есть услуги по WhatsApp и Viber❗ ❗"Такое есть только в ФСБ Подробно в ЛС!❗ ❗ЭТО НЕ ВСЕ УСЛУГИ❗ ❗МОЖНО ПРАКТИЧЕСКИЙ ВСЕ, В ЛС❗ ❗ПЕРЕЙДИ НА КАНАЛ, ЧТОБЫ ДОБАВИТЬ КОНТАКТЫ❗ ?СКОРО БУДЕТ АКТУАЛЬНА НОВАЯ УСЛУГА:? Пробив по-базам регионов РФ и ЗАРУБЕЖЬЯ: - Пробив информации по МВД - Пробив информации по ФНС - Пробив информации по ФМС - Пробив информации по ССП - Пробив информации по ПФР - Пробив информации по БКИ - И многое другое... ?Пока-что тестируем ? Завели тему на форуме - https://goo.gl/qo4CTH Уже имеются отзывы ? ?❗Писать только сюда : Tony_Mantony❗? ?❗ОСНОВНОЙ КАНАЛ - Telemag_RF❗?

@Komzpa SOS, спамеры атакуют :)

Думаю, он спит

❗СОВЕТУЮ СРАЗУ ПОДПИСАТЬСЯ, ИЛИ ДОБАВИТЬ В ЗАМЕТКИ СЕБЕ❗ - Восстановление сим-карт под QIWI, карты, соц.сети и пр. "Обговаривается" - Пробив местоположения через сим "погрешность 10-20 метров" - Пробив данных "ФИО и паспортные данные" - Детализация до 6 месяцев - Восстановление МТС, Билайн, Магафон, ТЕЛЕ2. "Стоимость зависит от номера" - Закрытые тарифы. Их очень много "Это те самые тарифы о которых Вы мечтали" - Сим-карты "только оптом" пустые/с балансом "МТС, Билайн, Магафон, ТЕЛЕ2" - Красивые номера, также подбор собственных вариантов. - Устройство для активации sim ❗ Также есть услуги по WhatsApp и Viber❗ ❗"Такое есть только в ФСБ Подробно в ЛС!❗ ❗ЭТО НЕ ВСЕ УСЛУГИ❗ ❗МОЖНО ПРАКТИЧЕСКИЙ ВСЕ, В ЛС❗ ❗ПЕРЕЙДИ НА КАНАЛ, ЧТОБЫ ДОБАВИТЬ КОНТАКТЫ❗ ?СКОРО БУДЕТ АКТУАЛЬНА НОВАЯ УСЛУГА:? Пробив по-базам регионов РФ и ЗАРУБЕЖЬЯ: - Пробив информации по МВД - Пробив информации по ФНС - Пробив информации по ФМС - Пробив информации по ССП - Пробив информации по ПФР - Пробив информации по БКИ - И многое другое... ?Пока-что тестируем ? Завели тему на форуме - https://goo.gl/qo4CTH Уже имеются отзывы ? ?❗Писать только сюда : Tony_Mantony❗? ?❗ОСНОВНОЙ КАНАЛ - Telemag_RF❗?

Завели тему на форуме - https://goo.gl/qo4CTH Уже имеются отзывы ?

отписал прям в саппорт, надеюсь, отреагируют

❗СОВЕТУЮ СРАЗУ ПОДПИСАТЬСЯ, ИЛИ ДОБАВИТЬ В ЗАМЕТКИ СЕБЕ❗ - Восстановление сим-карт под QIWI, карты, соц.сети и пр. "Обговаривается" - Пробив местоположения через сим "погрешность 10-20 метров" - Пробив данных "ФИО и паспортные данные" - Детализация до 6 месяцев - Восстановление МТС, Билайн, Магафон, ТЕЛЕ2. "Стоимость зависит от номера" - Закрытые тарифы. Их очень много "Это те самые тарифы о которых Вы мечтали" - Сим-карты "только оптом" пустые/с балансом "МТС, Билайн, Магафон, ТЕЛЕ2" - Красивые номера, также подбор собственных вариантов. - Устройство для активации sim ❗ Также есть услуги по WhatsApp и Viber❗ ❗"Такое есть только в ФСБ Подробно в ЛС!❗ ❗ЭТО НЕ ВСЕ УСЛУГИ❗ ❗МОЖНО ПРАКТИЧЕСКИЙ ВСЕ, В ЛС❗ ❗ПЕРЕЙДИ НА КАНАЛ, ЧТОБЫ ДОБАВИТЬ КОНТАКТЫ❗ ?СКОРО БУДЕТ АКТУАЛЬНА НОВАЯ УСЛУГА:? Пробив по-базам регионов РФ и ЗАРУБЕЖЬЯ: - Пробив информации по МВД - Пробив информации по ФНС - Пробив информации по ФМС - Пробив информации по ССП - Пробив информации по ПФР - Пробив информации по БКИ - И многое другое... ?Пока-что тестируем ? Завели тему на форуме - https://goo.gl/qo4CTH Уже имеются отзывы ? ?❗Писать только сюда : Tony_Mantony❗? ?❗ОСНОВНОЙ КАНАЛ - Telemag_RF❗?

ох, и сдесь этот говноспам((

Привет. Под linux есть что-то лучше pgadmin?

dbeaver, datagrip, sql developer. Правда они не лучше.