Тренировка по #инцидент_менеджемент Помню как погружался в работу с инцидентами. Я начал работать в небольшой компании, у нас был 1 дежурный. Я стал вторым. И оба мы были разработчиками. Сначала он меня учил на пальцах о системе и взаимодействии компонентов, показывал как чинить часто возникающие проблемы, а я смотрел. Я записывал в доку, потом пытался повторить тоже самое сам под его присмотром. Дальше выдал мне доступ на прод. И вот первое дежурство с потными ручонками... Страшно. Но оно кончилось и ничего не развалилось 😁 Второй раз уже случилось непонятное и пришлось копать логи, запросы и ошибки. Нашли - завели багу, и поняли, что по таким логам "так себе копать". Освоился и с кубером и Google Cloud. Один падучий сервис будил меня 4 дня подряд в час ночи. Я на 3 день сделал себе консоль прямо на телефоне, чтобы ходить перезагружать тот сбойный под не вставая с кровати 😉 На 5 ночь я проснулся сам в 1 час ночи - но никто не позвонил. Оказалось разработчики починили 👨‍🔧 вчера. Пока компания маленькая и растет - можно и получается учиться прямо на проде, т.к. потери не велики. В большой компании и в зрелом бизнесе такое уже не позволят. Да и до всего прода вы доступ уже не получите. Тогда как тренироваться? Вы можете попробовать сделать стенд повторяющий часть прода и там ломать и пробовать чинить - так делают ребята в Яндекс такси (рассказывали в докладе). Другой способ – попробовать отдельные тренажёры. Вот несколько площадок для тренировок онлайн по Linux и Kubernetes: - https://labs.iximiuz.com/challenges?author=ivan-velichko&filter=all&category=kubernetes - https://sadservers.com/ - https://keep-alive.ru - командные траблшутинга - https://srega.me/ - индивидуальные тренировки в формате Capture the flag Или - Оффлайн на своей машине https://github.com/Manoj-engineer/k8squest А как в работу с инцидентами погружались вы? Как получали опыт troubleshooting? #troubleshooting #личный_опыт #sre