Sergei
:)
⁠
я не тебе это написал)
Sergei
а, прости (:
Sergei
в интернете кто-то неправ!
Anonymous
где?!
Старый
Как вы тут вообще без меня жывёте? Как дела? Всё срётесь?
Как обычно, всё на меня агрятся и показывают своё чвс
Jenny
есть такое понятие, как "хождение по граблям"
Старый
Sheridan
На шра насрать, у меня их тоже местами есть
Sheridan
а как же "неведомая хуйня, никогда такой не было"?
Нееее. "Никогда не было и вот опять!!!"
Jenny
а как же "неведомая хуйня, никогда такой не было"?
есть всяческие бизнес-метрики и статистика трафика
Sergei
⁠
эскалировать
Jenny
если они падают или ненормально растут, робот может звонить
Sheridan
и ее будет решать дежурный инженер?
А нахуя он нужен если не для решения проблем?
⁠
потом скиллованные вперед штанов убегут, если их каждую ночь будут будить
Jenny
например
Sergei
эскалировать
но как он узнает что проблема вообще есть?
⁠
из мониторинга
Sergei
из мониторинга
но из мониторинга может робот эскалировать, внезапчиком
Nick
и ее будет решать дежурный инженер?
Решается только скилловыми людьми готовыми ее решать. То есть в конечном итоге - круглосуточными скиловыми людьми. Привет, офисы в разных часовых поясах.
Sheridan
Nick
А все остальное особо сильно не сработает. Эскалации не должны приходить в людей у которых нерабочее время.
Sergei
просто это должен быть по-настоящему rare case. единицы раз в год.
Nick
Тут есть две проблемы. Если это часто, то людей утомит. Если редко - то все расслабятся и забудут про этот момент.
Sergei
со вторым не согласен. ну т.е. наблюдал 3-5 ночных проблем в год и это не превращалось в проблему "ой, мы расслабились"
Nick
плюс всякая фигня. самолеты. ночная жизнь. все совпадет неудачно :)
⁠
дц ночник понятно, а по какому профилю была вторая фирма?
⁠
ясно
⁠
для дц и хостинга действительно многие вещи можно и лучше автоматизировать
Sergei
внезапно уничтожал я это уже не там. :)
Sergei
и в хостинге того уровня с точки зрения бизнеса дешевле нанять четыре обезьяны по 25 тыр
Sergei
Ник, насколько у вас много toil уходит низкоквалифицированному народу?
⁠
а в моем кейсе наличие 8 дежурников и супервайзера как минимум оправдано из-за финансового направления компании
Nick
Ник, насколько у вас много toil уходит низкоквалифицированному народу?
категорически немного. автоматизация работает.
Sergei
а скажи с бизнес-точки зрения, можно ли выстроить хостингом размером с ваш на ручном приводе?
Sergei
почему строите не на ручном? :)
Jenny
а в моем кейсе наличие 8 дежурников и супервайзера как минимум оправдано из-за финансового направления компании
мимо с телекома: с высоты своего опыта могу сказать, что очень много задач, который мы делали будучи дежурными можно было автоматизировать
Nick
почему строите не на ручном? :)
на ручном кстати быстрее доставлять фичи. программировать не надо. слабал инструкцию - и готово. но на ручном очень страшно и непредсказуемо. ты не будешь знать что где-то нахуеверчено до того момента когда будет уже очень поздно что-то предпринимать.
Nick
Плюс, люди постоянно ошибаются, качество сервиса будет ниже
Nick
Когда мы запускались например, у нас выдача серверов/настройка сети была уже автоматической, а вот ввод данных о серверах - ручной. Сотруднику ДЦ надо было ввести во внутреннюю систему руками данные о семи подключениях для каждого сервера (два питание, два приватная сеть, два публичная, одно iDRAC) - номера портов. Пока не докрутили в этой части автоматику тоже (месяца 3-4 первых), был АД
Nick
При этом люди офигенные, толковые, с опытом - проблема не в них, а в том что в стойке на 48 серверов получается 336 подключений. Достаточно при вводе ошибиться чуть больше чем в 1% случаев, и у тебя будет поломано 8% данных о серверах
HashTag
Подписка на #pdu
Konstantin
нет
Nick
а скажи с бизнес-точки зрения, можно ли выстроить хостингом размером с ваш на ручном приводе?
но при этом я стараюсь для всех ключевых процессов иметь fallback в ручное исполнение
Nick
потому что в софте может быть баг, и это может быть не баг внесённый последним релизом, а нерассмотренный edge case, который жил там с первого дня; и ETA на починку такого несколько непредсказуем
Jenny
это же человек из нетворк чатика
Vladimir
dmage работа дежадмина который может на уровне "место почистить" или "позвонить ответственному" - абсолютно всегда на 100% автоматизируется
Vladimir
именно тем что пока это можно описать инструкцией - это можно превратить в код
Anonymous
с этим
⁠
с теоретиками даже обсуждать это не буду
Vladimir
Vladimir
а не теоретики
Anonymous
с теоретиками даже обсуждать это не буду
кто теоретик? в у него в букинги дата центры на мрлд баксов
⁠
у нас была попытка формализовать документацию в виде дерева инцидентов
⁠
в итоге оно настолько разрослось, что даже саму доку стало сложно поддерживать
⁠
чем закончилось все - уже не знаю
Anonymous
то, что у вас не было персонала, а контора говно, как у меня конторы, не показатель
Vladimir
dmage ну вот у нас в моем сервисе получилось довести до состояния что за последние полтора года была 1 проблема требовавшая решения вот прям ща и по которой позвонили
Anonymous
хотя найти таких задротов как сергей и смирнов володя оч сложно
Vladimir
и да, звонил робот
Vladimir
в рамках компании пока не так гладко, но к этому идет
Anonymous
а то вы так скоро доавтоматизируете, что работы не станет
Vladimir
а то вы так скоро доавтоматизируете, что работы не станет
так работа не исчезнет, сервис сам собой развиваться не будет и именно что сложные проблемы
Vladimir
они останутся