15 лет в сисадминстве: главные уроки и грабли

Здравствуйте! Я Игорь Федоров, сисадмин с 15-летним стажем. Начинал с Windows Server 2003, сейчас управляю гибридной инфраструктурой на 500+ серверов. Хочу поделиться уроками, которые выучил на собственных ошибках.

За 15 лет я совершил достаточно ошибок, чтобы написать книгу. Вот самые важные уроки.

В 2012 году я потерял данные клиента, потому что «бекап же настроен». Оказалось, он упал 3 недели назад. Теперь: бекапы проверяются автоматически, тестовый restore — раз в неделю.

Когда я заболел на 2 недели, коллега не смог разобраться в моей «авторской» настройке серверов. С тех пор — Wiki + runbooks для каждого сервиса.

Нет мониторинга = узнаёшь о проблеме от клиента. Zabbix + Grafana — мой минимальный набор. Алерт должен приходить раньше, чем позвонит руководство.

Ручная настройка 10 серверов — терпимо. 100 — ад. Ansible спас мне сотни часов жизни.

Технологии меняются быстрее, чем ты успеваешь к ним привыкнуть. Docker, K8s, облака — всё это пришло за последние 5 лет и перевернуло индустрию.

Какие грабли были у вас? Давайте обсудим!