Задача / 01Гипотеза / Наблюдаемое состояние
Формулируем ожидаемое поведение сервиса при конкретном изменении условий.
Выбираем показатели, по которым определяем влияние на пользователей.
Chaos Engineering · Настройка · Сопровождение
Внедрение Chaos Engineering
Помогаем проверять гипотезы о надёжности системы через контролируемые эксперименты. Определяем ожидаемое поведение, ограничиваем воздействие и фиксируем выводы.
Пилот начинаем в согласованной среде с наблюдаемостью и условиями немедленной остановки. Выход за пределы пилота обсуждаем по его результатам.
Карточка экспериментаНаблюденияПлан развития
Подготовим вводные
Уточним задачу: Chaos Engineering
Три вопроса помогут определить контур работ и следующий шаг к оценке.
Вопрос 1 из 3
Можно вернуться и изменить ответ
Какие задачи решаем
Состав работ зависит от вашей системы и согласованных критериев результата.
Задача / 01
Задача / 02Ограниченный эксперимент
Согласуем область воздействия, остановку и возврат.
Задача / 03Повторяемый процесс
Фиксируем выводы и условия повторного запуска после изменений.
Специалисты, которые могут участвовать в вашем проекте
Состав команды и участие сотрудников согласуем с учётом задач проекта и сроков.
Специалистов: 2
Специалисты не найдены. Измените параметры или сбросьте фильтры.
Алексей Р.
SRE-инженер
Все навыки (16)
Илья Г.
SRE-инженер
Все навыки (15)
Состав и границы услуги
В состав работ
Пилотный эксперимент, его описание, выполнение в согласованной среде и разбор результата.
Зависимости
Гипотеза, показатели состояния, разрешённая среда и ответственные за остановку.
Не входит автоматически
Случайные разрушительные действия, несогласованные испытания production и гарантия полной устойчивости не входят.
Что получите по итогам работ
Конкретный состав артефактов и критерии приёмки фиксируем перед началом работ.
Карточка эксперимента
Гипотеза, показатели, границы и условия прекращения.
Наблюдения
Данные о поведении сервиса при выбранном воздействии.
План развития
Выводы и правила следующих экспериментов.
Инструменты и конфигурация
Состав решения согласуем с учётом вашей инфраструктуры и задач.
Что ожидаем
Задаём проверяемое утверждение о системе.
Что наблюдаем
Определяем нормальное состояние и допустимые изменения.
Что меняем
Выбираем инструмент после согласования области эксперимента.
Начнём с вашей текущей системы
Хотите проверить предположение об устойчивости?
Сформулируем одну гипотезу и выберем минимальное воздействие, достаточное для её проверки.
Доступы согласуем отдельно
Предоставляйте только необходимые сведения и минимальные права для выбранного этапа.
ПЕРЕД СТАРТОМ
Карта вашей системы
- СервисКритичный сценарий и зависимости.
- НаблюдениеМетрики состояния и признаки недопустимого влияния.
- РазрешенияСреда, окно и порядок остановки.
Общая картина проектаОснова для оценки объёма и плана работ
Форматы выполнения работ
Формат сотрудничества / 01
Обследование
Разберём текущую схему и определим необходимый состав работ.
Формат сотрудничества / 02
Пилот
Проверим выбранный подход на ограниченном сценарии.
Формат сотрудничества / 03
Согласованный объём
Выполним план для выбранных систем и участников.
Формат сотрудничества / 04
Передача команде
Разберём результат, ограничения и порядок дальнейшей работы.
Этапы проекта
01
Согласуем задачу
Определим исходное состояние, границы работ и критерии приёмки.
РЕЗУЛЬТАТ ЭТАПАПлан и критерии
Подробнее об этапе
Сформулируем одну гипотезу и выберем минимальное воздействие, достаточное для её проверки.
02
Выполним работы
Реализуем согласованный объём на выбранном контуре.
РЕЗУЛЬТАТ ЭТАПАГотовое решение
Подробнее об этапе
Пилотный эксперимент, его описание, выполнение в согласованной среде и разбор результата.
03
Проверим и передадим
Проверим результат по согласованным сценариям и передадим материалы команде.
РЕЗУЛЬТАТ ЭТАПАРезультат и инструкции
Подробнее об этапе
Проверяем ограничение области воздействия. Проверяем доступность способа прекращения. Сопоставляем наблюдения с исходной гипотезой. Выводы и правила следующих экспериментов.
Стоимость и сроки: что влияет на оценку
Стоимость и продолжительность определяем после анализа исходных данных, доступа и согласованного объёма. Подготовим индивидуальную оценку с учётом требований к результату.
Объём+Зависимости+Проверка→Оценка работ
| Фактор | Что оцениваем |
|---|---|
| Гипотезы | Количество независимых предположений. |
| Среда | Готовность наблюдаемости и изоляции. |
| Инструменты | Подготовка контролируемого воздействия. |
| Повторение | Требования к сохранению и повторному выполнению эксперимента. |
Проверка, передача и дальнейшие действия
Границы
Проверяем ограничение области воздействия.
Остановка
Проверяем доступность способа прекращения.
Вывод
Сопоставляем наблюдения с исходной гипотезой.
Передача результата
Передаём согласованные настройки, результаты проверки и инструкции. Дополнительное сопровождение и режим реакции обсуждаем отдельно.
Опыт команды в проектах
Существующие проекты и отзывы компании CodeHub. Примеры не означают, что именно эта услуга выполнялась в каждом проекте.
1–3 / 9
01 / 09Московская биржа
Python · автоматизация тестирования
Московская биржа: автоматизация тестирования
Московская биржа. Автоматизация тестирования
85% критичных путей покрыто
02 / 09Крупнейший ритейл
Данные · смежный опыт
Крупнейший ритейл: SAP и Data
Крупнейший ритейл - проекты по SAP и Data
Data Lake и SAP-процессы
03 / 09Иннотех / ВТБ
Иннотех и ВТБ: усиление IT-команд
Усиление командами и точечными ИТ-специалистами команды интегратора Иннотех на проектах ВТБ и дочерних компаний
25+ специалистов выведено
04 / 09Крупный интегратор
HR CRM для крупного интегратора
Взаимодействие с интегратором в рамках разработки внутренней HR CRM для автоматизации рекрутмента и хранения внутренней базы кандидатов
40% сокращение времени найма
05 / 09Р-Фарм
1С-разработка для Р-Фарм
1С Разработка для Р-Фарм
1С модули для фармы
06 / 09МТС Digital / МТС WMS / МТС AI
МТС: усиление выделенными командами
Усиление команд, предоставление выделенной команды.
4 направления усиления
07 / 09Фиолетовый банк маркетплейса
Банковский маркетплейс: Java и Kotlin
Усиление отделов Java + Kotlin разработки.
Java + Kotlin усиление разработки
08 / 09ВинЛаб и Аптечки Столицы
Восстановление IT-инфраструктуры после кибератак
Восстановление ИТ-инфраструктуры после кибератак
60+ точек восстановлено
09 / 09EdTech-платформа
EdTech-приложение для школьников на Unity
Мобильное приложение для Edtech-платформы для школьников на Unity
80 000+ MAU
Видеоотзывы клиентов
Отзывы клиентов о работе компании CodeHub; они не являются подтверждением выполнения конкретно этой услуги.
1–3 / 5
Борис Губанов
Клиент CodeHub
Татьяна Тарасенкова
Гульмира
Вячеслав Юдин
Вопросы об услуге: Chaos Engineering
Нужно сразу проводить эксперименты в production?
Нет. Среду выбираем по готовности системы и допустимому влиянию. Для пилота может использоваться стенд.
Это случайное отключение серверов?
Нет. Каждый эксперимент имеет гипотезу, показатели и согласованные ограничения.
Обязательно покупать инструмент?
Не обязательно. Способ воздействия выбираем после определения задачи и возможностей среды.
Что делать, если гипотеза не подтвердилась?
Фиксируем наблюдения и задачи улучшения. Повторный эксперимент согласуем после изменений.
Как определяются сроки и стоимость?
После изучения исходных данных согласуем объём, зависимости и критерии приёмки. В оценке отделим работы от внешних расходов.
Какие доступы потребуются?
Для начала нужны описание системы и примеры данных. Права для настройки и проверки согласуем под выбранный этап.
Обсудим задачу
Опишите задачу по услуге «Внедрение Chaos Engineering». Уточним вводные, ограничения и следующий шаг к оценке.