Ты уверен, что 2гб резидента, а не вирта?
да
Sergei
Евгений
Понятно куда тратит, сборщик мусора не собирает
Евгений
Нахуярят редакторов на джаве, ещё бы на пхп написали
Anonymous
Почему у меня за лимиты пайчарм не выходит?)))
Sergei
точно. надо редакторы на питоне писать.
Mark ☢️
Вангую пичальм настраивает жаба машину скажем на 0.5 оперативы физической. Ну жаба и отъедает. Сказали же можно. Ну и не горбаджколлектит пока не сожрет
Sergei
но та же идейка с хипом на 500 мбайт ведет себя неприятно
Евгений
Вангую пичальм настраивает жаба машину скажем на 0.5 оперативы физической. Ну жаба и отъедает. Сказали же можно. Ну и не горбаджколлектит пока не сожрет
Требуется эникейщик в аутсорс конторку, основная задача -- настраиваивать идею. Опыт работы в администрированнии java проектов 3-5 лет обязателен
Uncel
https://twitter.com/shipilev/status/1002637479198035968?s=19
Anonymous
По умолчанию пайчарм жрет вроде гиг. А дальше он спросит, мол, браток, памяти мало, го увеличим. В аналогичной ситуации вим сожрет нахуй всю оперативу и не подавится
Евгений
Зачем ему жрать? Он просто файл заммапит, всё остальное за него линуск сделает
Евгений
А помнить все эти безумные -XX'ы и -Xm'ы, чтобы юзать редактор, это какое-то безумие
Vladimir
Зачем ему жрать? Он просто файл заммапит, всё остальное за него линуск сделает
ради фишечек, которых в том же виме не добиться, например )
Евгений
Почему идея жрёт понятно -- они же компиляторы свои для каждого языка пишуи
Евгений
На джаве
Vladimir
Почему идея жрёт понятно -- они же компиляторы свои для каждого языка пишуи
скорее интерпретатор
Евгений
Ну, фуззи синтаксический анализатор, на самом деле
Anonymous
Зачем ему жрать? Он просто файл заммапит, всё остальное за него линуск сделает
Я несколько раз попадал на ситуацию, когда открывал лог вимом, который оказывался мягко говоря ебовым. И пизда оперативе на сервере
Евгений
Я несколько раз попадал на ситуацию, когда открывал лог вимом, который оказывался мягко говоря ебовым. И пизда оперативе на сервере
Не разу такого не видел, загружал 60гб логи и норм было. man mmap
Anonymous
Я тебе про прекрасный дефолт вима, чувак.
Anonymous
vs прекрасного дефолта пайчарма, который сразу контролит память
Евгений
Ну я не знаю что у тебя в дефолте, может форк-бомба
Anonymous
Хуерка. вим по дефолту одинаков более-менее. Во фрях только настройки отличаются
Sergei
vs прекрасного дефолта пайчарма, который сразу контролит память
ну открывать логи идеей - ещё охуеннее чем вимом
Евгений
Ну тогда ты просто врёшь. Придумал бы историю пореалистичней, если бы понимал в выделении памяти в линуске
Anonymous
датышо))
Sergei
попкорн.жпг
Anonymous
Да какой попкорн. У меня есть теория, что Евгений обитает в анально огороженных резервациях, где такая ситуация невозможна
Sergei
Да какой попкорн. У меня есть теория, что Евгений обитает в анально огороженных резервациях, где такая ситуация невозможна
ну почему. Евгений не первый раз демонстрирует, что он эксперт в любой рандомно взятой области знаний. этим и прекрасен.
однажды он мне доказывал, что в питоне невозможно использовать табы в качестве отступов.
Mark ☢️
Не разу такого не видел, загружал 60гб логи и норм было. man mmap
Знаешь ли ммап не особо поможет посчитать число сирок в файле
Mark ☢️
Не разу такого не видел, загружал 60гб логи и норм было. man mmap
У тебя проблнмы с ротацией
Mark ☢️
Mark ☢️
Чтобы потом по логам выборку делать удобную
Mark ☢️
И быструю
Mark ☢️
По полям
Sergei
В чем лучше логи хранить ? Подозреваю что бд журналд гавно
хранить - очевидно в сжатых архивах на каком-то ледяном сторадже.
Евгений
ну почему. Евгений не первый раз демонстрирует, что он эксперт в любой рандомно взятой области знаний. этим и прекрасен.
однажды он мне доказывал, что в питоне невозможно использовать табы в качестве отступов.
Всё очень просто -- если влезатьтолько в те срачи, где ты чо-то знаешь, а в те, в которых ты не разбираешься -- не влезать, то сложится соответствующая репутация.
А если есть ещё и фанаты, перевирающие твои тезисы, так вообще
Евгений
Чтобы потом по логам выборку делать удобную
А тебе нужно делать быструю выборку по логам 5'ной месячной давности?
Sergei
Sergei
задача поставлена в духе хрыча.
Sergei
и чтобы ещё запросы над 10 пб логов выполнялись за доли секунды
Mark ☢️
и чтобы ещё запросы над 10 пб логов выполнялись за доли секунды
Конкретных требований нет. Хочется услышать технологии который позволят по мнению икспердов делать выборки максимально быстро
Yury
Sergei
Конкретных требований нет. Хочется услышать технологии который позволят по мнению икспердов делать выборки максимально быстро
без конкретных требований идите нахуй. потому что сюда подойдёт от шелльника на баше до хадупа в зависимости от того какие ты крутилки у задачи покрутишь.
Евгений
Храни логи заархивированными на ледяных стораджах, а кастомные поля в кликхаус (и туда же номер строчки в логе)
Велосипед.пнг
Mark ☢️
без конкретных требований идите нахуй. потому что сюда подойдёт от шелльника на баше до хадупа в зависимости от того какие ты крутилки у задачи покрутишь.
Для сборища из 10 нодов с 15 демонами на каждом и без массивных логов типа аксеслог.
Mark ☢️
Выборки по типу аля журналдэ
Mark ☢️
Типа дай за неделю от постфикса с уровнем варнинг
Евгений
Самое важное -- сколько у тебя террабайтов логов в день и сколько нужно хранить эту опердень
Mark ☢️
Самое важное -- сколько у тебя террабайтов логов в день и сколько нужно хранить эту опердень
Скорость выборки важна. Обьема есть дохуя с запасом
Mark ☢️
Евгений
От объема сильно зависит скорость, ваш КО
Mark ☢️
Логстэш гавно ?
Евгений
Ты хотел сказать "эластик"
Mark ☢️
Я не девапс
Navern
а эластик кластер прожорливый слегка. ну это так, по опыту. И там зависит от того за какое время ты хочешь серчить без проблем(активный/не активный индекс)
Navern
расскажешь потом