Grigorii
вот мне интересно откуда на госуслугах нагрузка в 180k rps. А вообще это настолько кривое поделие, только вчера вечером матерился на этот счет
SergeyB
вот сейчас есть прекрасный шанс пойти и сделать хорошо
Denis
вот вот)
Vladislav 👻
прям тащусь от фразы "сделать хорошо", прям вам так и дали, поменять бизнес-процессы, стеки и прочее
Grigorii
а смысл? - по деньгам не густо. Мне на сотку больше недавно в МСК предлагали. Да и напрягает "приукрашивание" условий уже на входе
SergeyB
прям тащусь от фразы "сделать хорошо", прям вам так и дали, поменять бизнес-процессы, стеки и прочее
"сделать хорошо" в своей части? не? попытаться что то улучшить, предложить? не? мы лучше все обосрем и ничего делать не будем
Vladislav 👻
"сделать хорошо" в своей части? не? попытаться что то улучшить, предложить? не? мы лучше все обосрем и ничего делать не будем
вот не надо так хейтить меня, я повидал таких уже не мало, никто не будет менять процессы просто потому что это best practise
Grigorii
"сделать хорошо" в своей части? не? попытаться что то улучшить, предложить? не? мы лучше все обосрем и ничего делать не будем
делать можно, но на более адекватных проектах. На госзаказах конечное качество мало кого вообще волнует, путсая трата времени и сил что-то там пытаться поправить но мне по прежнему не ясно откуда они там выдумали 180к RPS нагрузку
SergeyB
Vladislav 👻
скорее всего, такие предлагальщики просто не работали на крупных проектах.
очень спорно... но по факту, коней на переправе не меняют, если начали один стек для проекта, будут его мусолить до победного
Vladislav 👻
и пофиг, что стек морально устарел уже
Grigorii
и пофиг, что стек морально устарел уже
причем судя по вылетавшим вчера у меня ошибкам на госуслугах там .net на винде
Denis
net на винде?))) тогда понятно Ваше желание всех и все f12 вам в помощь
Anonymous
180к RPS это наверное со всех сервисов вместе у них суммарно, может даже внутренние RPS посчитали между сервисами и всю статику.
Denis
Rps с сервисов СУБД
Anonymous
А ну тогда понятно
Anonymous
В вакансии не заметил а что за БД в основном используются?
Denis
Oracle
Anonymous
Oracle
Им занимаются другие люди и я так понимаю это не входит в зону ответственности по этой вакансии?
Grigorii
Rps с сервисов СУБД
так при таких нагрузках вам DBA отдельные нужны, а не мешать все в кучу
Vladislav 👻
Oracle
180k RPS?
Denis
Да, но по тредампу посмотреть на каком вызове висит, какой запрос и т.п. все это нужно
Denis
Запросы свои не фреймворков
Grigorii
net на винде?))) тогда понятно Ваше желание всех и все f12 вам в помощь
а где ему еще быть то? какие-то IIS -ские ошибки вчера наблюдал
Denis
180k RPS?
Да, несколько rac кластеров
Vladislav 👻
Да, несколько rac кластеров
А метрику не подскажите, как измеряли? через GV$ASM_DISK_STAT?
Grigorii
а вообще странный подход - в требованиях ни слова про базы данных, а вот нагрузка RPS приведена на базы. Некая "нелогичность" уже тут начинает проскакивать, остается догадываться с чем еще можно столкнуться у вас
George
ISS? Может IIS?
Grigorii
Iss нету на госуслугах, nginx
да вы еще и не знаете за что отвечаете! уж что-то а ошибку nginx от IIS я отличить могу, особенно, если виндовые пути в ошибках отсвечивали
Denis
да вы еще и не знаете за что отвечаете! уж что-то а ошибку nginx от IIS я отличить могу, особенно, если виндовые пути в ошибках отсвечивали
тогда откройте страничку госуслуг, посмотрите в отдалке какой сервер вам отвечает, или сформируюет намеренно кривой запрос, чтобы увидеть эксепшен
Denis
в чем проблемма?
Denis
просто холиварить о том что все плохо, я не готов, это не конструктив
Anton
топ 3 базам..
Vladislav 👻
а потом суммировали?
Vladislav 👻
а почему вообще это в RPS записали? о_0
Denis
как вывод, понимание, что иногда придется опускаться до уровня исполнения кода, jit компилятора, памяти и процессов
Denis
все зависит от того, насколько быстро человек выйдет на поле, вилка больше + есть премии
Anton
а почему вообще это в RPS записали? о_0
статистику собирали в контексте сравнения с нашими базами постгреса и в наших реалиях наиболее подошли RPS а не TPS
Vladislav 👻
да это прекрасно, выбирать определения под свои реалии...
Vladislav 👻
особенно если учесть, что это совсем не RPS
Anton
Владислав, как будете сравнивать вставку в лог и бизнес операцию расчета среднего кол-ва заявок в по сервисам ?
Anton
транзакции разные бывают
Anton
если интересно, приходите на собеседование, расскажу покажу про детали и профиль нагрузки
Denis
про iis curl -I https://www.gosuslugi.ru/ HTTP/1.1 200 OK Server: nginx
Denis
вы хедеры выдите?
Denis
версию сможете определить?
Grigorii
если фронтом стоит nginx это еще не значит что в бекэндах его нет
Vladislav 👻
если интересно, приходите на собеседование, расскажу покажу про детали и профиль нагрузки
не, спасибо, у меня текущий проект больше RPS выдает по любым критериям оценки
Alexandr
Город #москва Формат: #офис (полный день) В www.rtlabs.ru открыта вакансия ведущего системного администратора под задачи: * Обслуживание серверов под управлением ОС Linux; * Обслуживание серверов приложений J2EE Tomcat, Jboss, AMQ (Artemis; ApacheMQ); * Диагностирование сетевого стека взаимодействия приложений, умение использовать tcpdump и whireshark; * Поддержка и развитие системы мониторинга сервиса, умение находить нужные и правильные места в большой распределенной системе; * Предотвращение сбоев в ИТ-системе и решение проблем и проактивная работа в части вверенного направления; * Взаимодействие с разработчиками, активное участие в проектирование новых сервисах и обсуждение задач по рефакторингу текущих. * Управление командой из 2-3х инженеров, умение грамотно управлять приоритетами задач. * Автоматизация процессов протекающих в системе при помощи Ansible; Bash. ❗️Требования: * опыт от 5 лет системного администрирования; * отличные знания Linux (centos), java (perfomance tunning, tread dump and memory analyze); * уверенные знания nginx, tcp/ip, ansible, систем мониторинга. ❗️И будет плюсом: * Опыт автоматизации процессов в больших распределённых системах. ❗️Мы предлагаем: * Работу в интересных социально-значимых нагруженных проектах ГосУслуг (180k RPS и рост БД 4 ТB в день); * Конкурентную заработную плату по результатам интервью (150 000 - 180 000 рублей) + 30% премии по результатам работы; * Отсутствие формализма в учете рабочего времени; * Комфортный офис класса А в шаговой доступности от станции метро "Румянцево"; * Оплачиваемую парковку рядом с офисом; * ДМС с хорошим выбором клиник; * 100% оплата фитнеса; * Запоминающиеся корпоративные мероприятия на природе и в офисе; * Чай, кофе, печеньки, овощи, фрукты; ‼️Откликаться можно здесь: https://hh.ru/vacancy/24745852 ‼️Вопросы в личку @bushmelev_aa и на почту change@rtlabs.ru Вакансия Ведущий системный администратор в Москве, работа в РТ Лабс.
4ТБ в день рост БД? Это не очепятка?
Vladislav 👻
да бред, в е-коммерс и то меньше
Anton
4ТБ в день рост БД? Это не очепятка?
select trunc(sum(BLOCKS*BLOCK_SIZE)/1024/1024/1024) as redo_gb,trunc(COMPLETION_TIME) from v$ARCHIVED_LOG where DEST_ID=1 and COMPLETION_TIME> sysdate-7 group by trunc(COMPLETION_TIME) order by 2 ; REDO_GB | TRUNC(COMPLETION_TI ---------- | ------------------- 1723 | 16.04.2018 00.00.00 5771 | 17.04.2018 00.00.00 5575 | 18.04.2018 00.00.00 5527 | 19.04.2018 00.00.00 5568 | 20.04.2018 00.00.00 5103 | 21.04.2018 00.00.00 5255 | 22.04.2018 00.00.00 4055 | 23.04.2018 00.00.00
Anton
Коллеги, если интересно - задавайте вопросы в ЛС.. в общем чате затеряется
Anton
Vladislav 👻
Это простое хранилище, и с фактическими цифрами никак не совпадает от слова совсем
Vladislav 👻
Поэтому ваши 4ТБ смело можете делить на порядок минимум
Anton
Владислав, однозначно, вам виднее что у нас и как
Vladislav 👻
Я знаю, какой поток проходит у меня в хранилище, у вас запрос показывает вообще не то
Vladislav 👻
Вы хоть почитайте, что такое v$ARCHIVED_LOG
Vladislav 👻
Ну и засрать оракл, много ума не надо, это из суровой практики
Alexander
Риду логи это не прирост бд, но я думаю вы и сами это знаете
Roki
Так, а вот сейчас важно, да. Как известно, в любой войне (а сейчас без преувеличения «Битва за Телеграм») есть предатели. Некоторые просто #зассавшие, а есть еще деятельные предатели. Ну, которые за сало и самогон вместе с гестаповцами сараи с людьми жгли, помните? Так вот, у нас есть #пособник_террористов в лице корпорации Mail.ru Group (что не удивительно совсем). Довольно много подписчиков в ЛС сообщили, что были совершенно приватные прокси-впн, как ВНЕЗАПНО хостеру прилетал абуз. Или сразу бан в реестр. Как они вычисляли? Очень просто. Напомню, что у МРГ есть еще и поисковик. Так вот, последние дни весь интернет сканировали на предмет Telegram проксей c внутренних IP-адресов Mail.ru. Например, очень много с 128.140.175.98 Как узнали: РКН начал банить даже те прокси, которые никогда реально не пропускали трафик юзеров и вообще себя никак не проявляли. Стали собирать логи. Нашли, что первый запрос всегда от Mail.ru, затем бан. Можете убедиться сами, кто пострадал. Что можно сделать: 1. Никогда не общаться с пособниками террористов. Не пользоваться их сервисами. Не платить денег за рекламу. Убрать счетчики МРГ со своих страниц. 2. Удалить аккаунты на МРГ — мейл.ру, ВК, ОК. Я напомню, что иметь там акки — это еще и небезопасно в физическом плане. ВСЕ «посадки за репост» были за сервисы МРГ. 3. Чтоб обезопасить свои ресурсы — запретить доступ к ним с IP МРГ. Ну, например, 128.140.168.0/21 access-list, ip-tables, .hosts — вот это все. Вы лучше знаете. 4. Всячески порицать, осуждать и упрекать сотрудников МРГ. Парни, я знаю, что вы, может быть, прекрасные специалисты и хорошие люди. Но вы работаете на террористов и карателей. Сами решайте, как вам поступить. Требуйте от начальства отказа от сотрудничества с РКН. Увольняейтесь. 5. Попытаться, чтоб информация этого псто разошлась как можно шире. Страна должна знать своих предателей. #digitalresistance
Roki
Пару центов за Мейл.ру
Arty
Какое это имеет отношение к теме чата, тем более со всеми этими эпитетами про гестапо?
shazo
И жёлтые обвинения, без доказательств...
Roki
Какое это имеет отношение к теме чата, тем более со всеми этими эпитетами про гестапо?
Имеет прямое отнощшение. Если ты так не считаешь, то удали поджалуйста телеграм.
Roki
Рабинович, или крестик сними, или трусы надень.
shazo
Имеет прямое отнощшение. Если ты так не считаешь, то удали поджалуйста телеграм.
а где доказательства? чем это будет отличаться от обвинений в стиле: первый запрос на моем vpn сервере был от google.com. Полюбому из-за него меня забанили.
Roki
Банят сервисы, которые вобще не учатсвовали ни в каом сопротивлении. Это явно новый уровень дна.
Arty
Да, при том когда меня тут спросили в контексте поиска работы (т.е по теме чата) почему я хочу уехать и я ответил что по политическим причинам - получил бан. А как трусики, гестапо и сжигание людей обсуждать - это пожалуйста
shazo
Я не отрицаю, что банят. Я говорю о "желтых" обвинениях.