Разбор инцидента 20.10 20 октября «Подсказки» были недоступны около 40 минут, и еще 40 минут не работали у части пользователей. Ниже краткий разбор сбоя и меры, которые мы предпринимаем. Сначала немного о том, как устроена «Дадата». Мы стараемся делать отдельные сервисы максимально независимыми — так они получаются более надежными и легче масштабируются. Например, если сайт «Дадаты» или сервис сбора статистики сломаются — «Подсказки» продолжат работать как ни в чем не бывало. Аналогично «Стандартизация» не зависит от «Подсказок», и так далее. В целом такой подход работает хорошо: сбои «Дадаты» нечасты, а когда случаются — обычно связаны не с отказами в самих сервисах, а с сетевыми проблемами в рунете, атаками на провайдеров или аппаратными сбоями в дата-центре. Но инцидент 20 октября стал исключением. В «Подсказках» мы просмотрели одну неочевидную зависимость от локального ресурса. Когда этот ресурс впервые за 10 лет перестал работать — сломались и «Подсказки». А поиск корневой причины, к сожалению, занял много времени — отсюда большая продолжительность сбоя. Мы уже приняли временные меры, чтобы снизить зависимость «Подсказок» от проблемного ресурса, и работаем над постоянным решением. Простите за сбой 🙏 И спасибо, что остаетесь с нами!