Аутстаффинг ИТ-специалистов

Разбор инцидентов · Настройка · Сопровождение

Разбор причин инцидентов

Разбираем причины произошедшего сбоя и условия, которые усилили его влияние. Восстанавливаем хронологию и готовим проверяемые меры против повторения.

Разделяем подтверждённые факты, гипотезы и недостающие данные. Цель разбора — улучшить систему и процесс, а не назначить виновного.

Хронология событийРазбор факторовПлан улучшений

Подготовим вводные

Уточним задачу: Разбор инцидентов

Три вопроса помогут определить контур работ и следующий шаг к оценке.

≈ 1 минута
Вопрос 1 из 3
Можно вернуться и изменить ответ

Какие задачи решаем

Состав работ зависит от вашей системы и согласованных критериев результата.

Задача / 01

Сбор фактов / Хронология

Сопоставляем логи, метрики, изменения и свидетельства участников.

Восстанавливаем последовательность обнаружения, действий и восстановления.

Задача / 02

Причины и факторы

Проверяем гипотезы и отмечаем условия, повлиявшие на масштаб сбоя.

Задача / 03

План мер

Формулируем действия, владельцев и способы проверки результата.

Специалисты, которые могут участвовать в вашем проекте

Состав команды и участие сотрудников согласуем с учётом задач проекта и сроков.

Специалистов: 14

Иллюстрация профиля Кирилл П.

Кирилл П.

Системный администратор DevOps

Senior+Опыт 10+ лет
PythonPowerShellAzure (ARM/AKS)GitOps
Все навыки (16)
Архитектура KubernetesDisaster RecoveryTerraformSQL ServerDockerJenkinsBashLinux/Windows ServerVMwareZabbixPuppetMongoDB
Иллюстрация профиля Дмитрий Х.

Дмитрий Х.

DevOps Specialist

Senior+Опыт 7+ лет
GoPythonKubernetesGitOps
Все навыки (13)
Архитектура KubernetesDisaster RecoveryRedisIstioArgoCDThanosKubernetes (Helm/Operators)GCPCassandra
Иллюстрация профиля Валерия Л.

Валерия Л.

DevOps Engineer

Senior+Опыт 11+ лет
PythonSQLGrafanaGitOps
Все навыки (15)
Архитектура KubernetesDisaster RecoveryDatadogELKPromQLCloudWatchOpenShiftAnsibleJenkinsKafkaRHCE
Иллюстрация профиля Владимир И.

Владимир И.

Cloud DevOps

Senior+Опыт 15+ лет
BashDockerGitLab CIGitOps
Все навыки (14)
Архитектура KubernetesDisaster RecoveryAnsibleELK StackPostgreSQLVMwarePuppetZabbixHyper-VWindows Server
Иллюстрация профиля Алексей Р.

Алексей Р.

SRE-инженер

Senior+Опыт 7+ лет
JavaBashLinuxSLO / SLI
Все навыки (16)
Capacity planningChaos engineeringDockerPrometheusJenkinsMongoDBPythonPrometheus/GrafanaGitOps (ArgoCD)HelmAWS EKSThanos
Иллюстрация профиля Илья Г.

Илья Г.

SRE-инженер

Senior+Опыт 14+ лет
GoPythonKubernetesSLO / SLI
Все навыки (15)
Capacity planningChaos engineeringTerraformAnsibleELK StackCassandraKafkaSLO/SLI-фреймворкиGCP AnthosIstioCortex
Иллюстрация профиля Ангелина О.

Ангелина О.

SRE-инженер

SeniorОпыт 12+ лет
GoPythonKafkaSLO/SLI-фреймворки
Все навыки (7)
GCP AnthosIstioCortex
Иллюстрация профиля Андрей А.

Андрей А.

Системный администратор L3

Senior+Опыт 13+ лет
Windows ServerLinux ServerVMwareОтказоустойчивые кластеры
Все навыки (30)
Disaster RecoveryАвтоматизация инфраструктурыProxMox VEMS Hyper-V CSDockerKubernetesMikroTikOpenVPNIPSecYandex CloudGrafanaVeeamMSSQL FCiSCSISenseOMVNextClouditsm365.comExchange DAGMS ADMySQLSQL ServerActive DirectoryIP-телефонияMikrotikСКУД
Иллюстрация профиля Александр З.

Александр З.

Системный администратор

Senior+Опыт 8+ лет
PowerShellBashActive DirectoryОтказоустойчивые кластеры
Все навыки (37)
Disaster RecoveryАвтоматизация инфраструктурыExchange Server 2016SCCMZabbixAsteriskKerio Connect1С:ERPDeviceLockZecurionMaxPatrolVeeamWazuhIndeed 2FANginxCiscoMikrotikCheckPointTrueConfSymantec BackupExecAcronisVPNVLANVoIPPythonDockerAnsibledocker-composeMS SQL ServerMySQLPostgreSQLApache HTTP ServerGit
Иллюстрация профиля Роман К.

Роман К.

Системный администратор / DevOps Engineer

Senior+Опыт 13+ лет
LinuxWindowsProxmox VEОтказоустойчивые кластеры
Все навыки (18)
Disaster RecoveryАвтоматизация инфраструктурыKubernetesМониторинг1С:ПредприятиеMS SQL ServerPostgreSQLExchangePostfixCI/CDHelpdeskWindows Os1C: БухгалтерияMikrotikSquid
Иллюстрация профиля Максим Б.

Максим Б.

Системный администратор

Senior+Опыт 22+ лет
Adobe PhotoshopWindows Server 2003Windows 7Отказоустойчивые кластеры
Все навыки (20)
Disaster RecoveryАвтоматизация инфраструктурыПроектирование ЛВСWindows ServerLinuxMikroTikUbiquitiConfluenceJira ZephyrPostmanSwaggerDevToolsKibanaGitAtlassian JiraJenkins
Иллюстрация профиля Максим Д.

Максим Д.

Системный администратор

Senior+Опыт 22+ лет
1C 7.7 SQLMS SQL 2000Отказоустойчивые кластерыDisaster Recovery
Все навыки (39)
Автоматизация инфраструктурыBashGolangAnsibleYAMLProxmoxDocker SwarmTerraformPackerCloudInitZabbixPrometheusGrafanaVictoriaMetricsGitPostgreSQLPatronietcdRocketChatJitsi MeetBackupPCFluent-bitOpenSearchOpenVPNRadiusADFSGPOMBAMPKILDAPCMDBJiraNginxIPTablesVPN
Иллюстрация профиля Светлана Ж.

Светлана Ж.

Системный администратор

Senior+Опыт 16+ лет
Windows 10Windows Server 2008 R2Windows Server 2012Отказоустойчивые кластеры
Все навыки (15)
Disaster RecoveryАвтоматизация инфраструктурыWindows server 2016Ubuntu ServerLinux mintCentOsDNSDHCPNATVPNProxy
Иллюстрация профиля Ольга Л.

Ольга Л.

Системный администратор

Senior+Опыт 15+ лет
SQLPythonФункциональное тестированиеОтказоустойчивые кластеры
Все навыки (24)
Disaster RecoveryАвтоматизация инфраструктурыLinuxGitQAПроведение тестированийAPICheck-listSSHMS ExchangeActive DirectoryDHCPНастройка DNSHyper-VHelpdeskVPNMikrotikSQL ServerСКУДTerminal Server

Состав и границы услуги

В состав работ

Разбор выбранного инцидента, отчёт и согласование последующих мер.

Зависимости

Логи, метрики, история изменений, журнал событий и участие ответственных.

Не входит автоматически

Гарантированное установление единственной причины, юридическая экспертиза и внедрение всех исправлений не входят.

Что получите по итогам работ

Конкретный состав артефактов и критерии приёмки фиксируем перед началом работ.

Хронология событий

Подтверждённые этапы и пробелы в данных.

Разбор факторов

Причины, проверенные гипотезы и ограничения выводов.

План улучшений

Задачи с владельцами и критериями проверки.

Инструменты и конфигурация

Состав решения согласуем с учётом вашей инфраструктуры и задач.

Факты

Сверяем данные нескольких систем и участников.

Начнём с вашей текущей системы

Сбой уже устранён, но причина неясна?

Сначала сохраним доступную картину событий и определим, какие гипотезы можно проверить.

Доступы согласуем отдельно

Предоставляйте только необходимые сведения и минимальные права для выбранного этапа.

ПЕРЕД СТАРТОМ

Карта вашей системы

  1. СобытиеПериод, влияние и действия по восстановлению.
  2. ДанныеМетрики, логи, версии и изменения конфигурации.
  3. УчастникиОтветственные и наблюдения команды во время сбоя.

Общая картина проектаОснова для оценки объёма и плана работ

Форматы выполнения работ

Формат сотрудничества / 01

Обследование

Разберём текущую схему и определим необходимый состав работ.

Этапы проекта

01

Согласуем задачу

Определим исходное состояние, границы работ и критерии приёмки.

РЕЗУЛЬТАТ ЭТАПАПлан и критерии
Подробнее об этапе

Сначала сохраним доступную картину событий и определим, какие гипотезы можно проверить.

02

Выполним работы

Реализуем согласованный объём на выбранном контуре.

РЕЗУЛЬТАТ ЭТАПАГотовое решение
Подробнее об этапе

Разбор выбранного инцидента, отчёт и согласование последующих мер.

03

Проверим и передадим

Проверим результат по согласованным сценариям и передадим материалы команде.

РЕЗУЛЬТАТ ЭТАПАРезультат и инструкции
Подробнее об этапе

Проверяем основания ключевых выводов. Отмечаем непроверенные предположения. Проверяем связь каждой задачи с выявленным фактором. Задачи с владельцами и критериями проверки.

Стоимость и сроки: что влияет на оценку

Стоимость и продолжительность определяем после анализа исходных данных, доступа и согласованного объёма. Подготовим индивидуальную оценку с учётом требований к результату.

Объём+Зависимости+Проверка→Оценка работ
Факторы оценки: Разбор инцидентов
ФакторЧто оцениваем
ИнцидентМасштаб и длительность события.
ДанныеПолнота и доступность исходных материалов.
СистемыКоличество затронутых зависимостей.
ПроверкаВозможность воспроизвести гипотезы.

Проверка, передача и дальнейшие действия

01

Факты

Проверяем основания ключевых выводов.

02

Неопределённость

Отмечаем непроверенные предположения.

03

Меры

Проверяем связь каждой задачи с выявленным фактором.

Передача результата

Передаём согласованные настройки, результаты проверки и инструкции. Дополнительное сопровождение и режим реакции обсуждаем отдельно.

Опыт команды в проектах

Существующие проекты и отзывы компании CodeHub. Примеры не означают, что именно эта услуга выполнялась в каждом проекте.

Видеоотзывы клиентов

Отзывы клиентов о работе компании CodeHub; они не являются подтверждением выполнения конкретно этой услуги.

Вопросы об услуге: Разбор инцидентов

Что если часть логов утрачена?

Укажем ограничения и используем доступные источники. Не будем выдавать гипотезу за доказанную причину.

Разбор ищет виновного?

Фокусируемся на условиях работы системы и процессе, которые можно улучшить.

Вы исправите найденные проблемы?

Реализацию мер можно согласовать после отчёта отдельным объёмом.

Можно разобрать повторяющиеся сбои вместе?

Да, если согласуем период, набор событий и признаки их связи.

Как определяются сроки и стоимость?

После изучения исходных данных согласуем объём, зависимости и критерии приёмки. В оценке отделим работы от внешних расходов.

Какие доступы потребуются?

Для начала нужны описание системы и примеры данных. Права для настройки и проверки согласуем под выбранный этап.

Обсудим задачу

Опишите задачу по услуге «Разбор причин инцидентов». Уточним вводные, ограничения и следующий шаг к оценке.

Онлайн-отправка пока недоступна. Свяжитесь с менеджером по телефону или email.

Обсудить проект

Онлайн-отправка пока недоступна. Позвоните нам: +7 (905) 884-06-92 или напишите на info@itcodehub.ru.

Видеоотзыв клиента