Alexander 🐕
Дубликатов не будет много никогда
Alexander 🐕
это очень легко решаемо
Это вообще не надо решать
Artur
ну, c ORM оно читается проще, тестируется проще
но когда запрос генерится в куче методов это не "читабельно а тестировать можно ТОЛЬКО голый sql;
Alexander 🐕
Решать надо отсутствие затаскивания резалтсета на процессор для сортировки
Alexander 🐕
Впрочем - это тоже пофиг
Alexander 🐕
Это же менеджерская админка
Alexander 🐕
В ней два человека сидят
Alexander
я вот всегда рекламирую этот подход - вещи должны быть простыми и удобными, для людей) это же мы поработили компьютеры, а не они нас)
Artur
а я сейчас играюсь с эластикой на бигдата
Artur
это так мимими ^_^
Artur
летает даже на говносервере в 1 ноду на 100кк
Artur
Alexander 🐕
Ничо не понял
Alexander 🐕
С чем ты играешься и что куда летает
Artur
ну, вместо sql
Alexander 🐕
Кто
Artur
летает в 4 измерение(время)
Artur
кто - эластиксёч
Alexander 🐕
А
Alexander 🐕
Ну погоди немного
Alexander 🐕
Индекс перестанет в память помещаться и ты все поймешь
Artur
ничто не мешает пересобирать индексы с нуля. вопрос пары дней на полной подготовке с джоинами
folex
ничто не мешает подождать пару дней, говорите?
Alexander 🐕
Ну - он свежий не будет помещаться в память, делов-то
Alexander 🐕
Люсиновские кэши страниц индекса это не совсем кэши
Alexander 🐕
В них не бывает эвикшна
Alexander 🐕
У меня миллиард объектов примерно проиндексирован люсином
Artur
пока...
Alexander 🐕
И памяти оно жрет 160 Gb пока :)
Alexander 🐕
Точнее - 320
Artur
это с докером подо всё на 1 сервере
Alexander 🐕
Потому что там репликация
Alexander
Точнее - 320
есть серверы с 6Тб памяти
Alexander
320 - это ещё не предел
Artur
ничто не мешает подождать пару дней, говорите?
я о разворачивании рядом если начнётся деградация. но речь судя по всему о самих индексах. а они лечатся. мне не все поля нужны в индексе
Alexander 🐕
есть серверы с 6Тб памяти
Как ты думаешь, сколько времени и денег стоит привезти один такой сервер в Россию?
Artur
у меня root@c82f96023968:/usr/share/elasticsearch# df -Bg Filesystem 1G-blocks Used Available Use% Mounted on none 976G 158G 769G 18% /
Artur
И памяти оно жрет 160 Gb пока :)
лищшние индексы отключать тоже надо
Artur
но ява она такая, да
Pavel
о, федора вышла
Artur
если есть какие-то рекомендации пламенно приветствую :)
folex
Alexander
Как ты думаешь, сколько времени и денег стоит привезти один такой сервер в Россию?
ну, вот тут https://www.supermicro.nl/products/motherboard/Xeon1333/#2011 есть материнки, куда вставляются 2-3Тб, 2 сокета, стоят тысяч 80 рублей, наверное
Alexander
корпус E-ATX
Alexander 🐕
Ты хочешь, чтобы я вставил 2-3Tb памяти в нестоечный сервер от SuperMicro?
Alexander
почему нестоечный? купи стоечный корпус E-ATX) и туда материнку Supermicro
Alexander
и тебе 2-3Тб ведь не нужно, значит, можно модули поменьше взять, там цена/Гб дешевле будет
Alexander
сделай, например, 1 Тб и даже в этом случае будет трёхкратный запас
Alexander 🐕
Я думал это обезяна
Да, это котик-обезьяна
Artur
-робот-лемур-3д-голограмма
blkmrkt
Сдох диск в RAID5, его заменили, и система ушла в офллайн. Рекомендуют зайти через KVM, загрузиться с рекавери CD для дебиана, и переносить ценные файлы. Посоветуете может чего?
blkmrkt
сказали что не диск сдох, а с файловой системой что-то
blkmrkt
сервер ушел в оффлайн после того как суппорт там что-то сделал
blkmrkt
подключился к ip kvm, а там такое
Alexander 🐕
Thin pool был?
blkmrkt
даже не знаю что это
Alexander 🐕
LVM thin pool
blkmrkt
угу, читаю. на момент краша df -h показывал что занято 97% диска, я сначала думал что постгрес внезапно там много схавал, но предпосылок к этому совершенно не было. Мог как-то нерабочий диск повлияить на кол-во свободного места?
Alexander 🐕
Нет, не мог
blkmrkt
странно, примерно за сутки пропало 1ТБ места, причем входящего трафика и близко столько не было
blkmrkt
подключился к ip kvm, а там такое
если это все так оставить, оно может само починиться?
Alexander 🐕
Нет
Alexander 🐕
Мне кажется, ему пизда
Alexander 🐕
Я бы грузился бы с лайвсиди
Alexander 🐕
И смотрел бы командой lvs че там с thin pool
Alexander 🐕
Не произошло ли переполнение области метаданных
Alexander 🐕
И, если да, то паковал бы вещи
Alexander 🐕
Загранпаспорт, виза есть?
blkmrkt
нет даже сервера куда данные деть)
Alexander 🐕
А сколько там тех данных?
blkmrkt
3ТБ примерно
blkmrkt
3,4 вроде
blkmrkt
было бы очень интересно узнать почему такая фигня произошла, вроде даже в постгресе все настройки оставлял дефолтными кроме кол-ва озу на то и это