Хаос как сервис: как мы в Авито проверяем устойчивость в проде и подключаем к этому LLM
Ilya Sadykov works on the TestOps team in Avito's PaaS, where he is responsible for chaos-testing tooling. The approach deliberately introduces failures into a system to test it. He outlines a map of Avito's chaos landscape, explains why the team needs its own orchestrator, and details how an LLM is built into the process.
Привет! Меня зовут Илья Садыков, я работаю в команде TestOps в PaaS Авито. Мы отвечаем за инструментарий хаос-тестирования — подхода, при котором в систему намеренно внедряются сбои для её проверки. В этой статье я покажу карту нашего хаос-ландшафта, расскажу, зачем нам собственный оркестратор, и подробно разберу, как во всё это встроена LLM. Рассмотрим кейсы от автоматического разбора прошлых инцидентов (LSR) до генерации AI-conclusion по конкретным экспериментам. Все архитектурные решения, о которых расскажу в статье, — из нашего реального продакшена. Читать далее