{"canonical_url":"https://engineer.company/uk/glossary/error-budget/","content_markdown":"# Бюджет помилок\n\n## Що це таке\n\nБюджет помилок — це обсяг збоїв, який сервісу дозволено за визначений період;\nйого виводять із цілі рівня обслуговування (SLO). Якщо ціль вимагає, щоб цього\nкварталу успішно завершилися 99,99% запитів, то решта 0,01% і є бюджетом:\nзапити, які можуть завершитися помилкою, випадково чи через свідомо взятий\nризик, і ніхто при цьому не порушить обіцянки. Англійською це називають error\nbudget. Бюджет рахують у тих самих одиницях, що й ціль, найчастіше в невдалих\nзапитах, і витрачається він тієї миті, коли користувач натрапляє на збій.\n\nІдея походить із книжки Google про Site Reliability Engineering. У розділі\nEmbracing Risk ціль задає продуктове керівництво, система моніторингу виступає\nнейтральною третьою стороною, яка вимірює, що сталося насправді, а різниця між\nними — це ненадійність, яка ще лишилася на квартал. Розробка продукту й SRE\nпогоджують цей бюджет разом і заздалегідь. Приклад у книжці взято з вимогливого\nкінця шкали: сервіс, який мусить відповісти на 99,999% запитів, має бюджет\n0,001%, тож одна проблема, через яку збоять 0,0002% запитів кварталу, з'їдає\nп'яту частину бюджету.\n\nБюджет не питає, чия це провина. Книжка прямо каже, що збій мережі чи відмова\nдата-центру витрачають його так само, як невдалий реліз, і що решта кварталу\nтоді може минути з меншою кількістю релізів. Користувачі відчули збій, отже, він\nрахується. Хто має на нього реагувати — окреме питання, і відповідь на нього\nналежить до письмової політики, погодженої до того, як щось піде не так.\n\n## Чому це важливо\n\nТі, хто випускає нові функції, і ті, хто тримає сервіс у робочому стані, хочуть\nрізного, і без спільного числа суперечку між ними виграє той, хто краще\nторгується. Книжка про SRE каже, що такі рішення не мають спиратися ні на\nполітику, ні на страх, ні на надію, і нагадує неофіційне гасло Google SRE: «Надія — не стратегія». Бюджет замінює суперечку числом, яке обидві сторони прийняли\nзаздалегідь. Поки бюджет є, релізи виходять; коли його витрачено, вони стають на\nпаузу, а зусилля переходять на тестування й стійкість. Книжка описує й м'якші\nваріанти того самого механізму, наприклад сповільнювати релізи або відкочувати\nїх у міру того, як бюджет наближається до нуля, а у виносці називає простий\nваріант «увімкнено або вимкнено» керуванням bang/bang.\n\nНайцікавіший ефект стосується поведінки. Коли бюджет великий, розробники можуть\nризикувати: частіше викладати зміни, пробувати експеримент. Коли він майже\nвичерпаний, зауважує книжка, розробники самі просять більше тестування й\nповільніших релізів, бо ніхто не хоче зірвати власний запуск. Команда починає\nстежити за собою сама. Книжка ставить одну умову: це працює, лише якщо SRE\nсправді має повноваження зупиняти запуски, щойно ціль порушено.\n\nБюджет керує здебільшого релізами, бо здебільшого саме релізи щось ламають:\nприклад політики в SRE Workbook оцінює, що зміни стоять приблизно за 70% збоїв\nGoogle. Тож бюджет підказує, куди варто спрямувати зусилля. Розділ Workbook про\nвпровадження SLO розбирає сервіс із ціллю 97% і бюджетом на чотири тижні в 109\n897 невдалих запитів. Невдалий реліз API, через який чотири години збоїли всі\nзапити, коштував 14 066 із них, приблизно 13%. Сервер бази даних, який вийшов з\nладу й 20 годин відновлювався з резервної копії, коштував за оцінкою 72 000,\nтобто 65%. Відмова сервера виглядає значно гірше, але компанія з прикладу\nстикається з такою раз на п'ять років, а невдалих релізів має два-три на рік,\nтож у середньому релізи обходяться приблизно вдвічі дорожче. Спершу окупається\nвиправлення процесу релізів.\n\nБюджет, який ніколи не витрачається, теж про щось свідчить. Книжка зазначає, що\nвін показує, чого коштує надто висока ціль у негнучкості й повільних інноваціях,\nі що команда, якій важко випустити продукт, може послабити ціль і тим самим\nзбільшити бюджет.\n\n## Як це виглядає на практиці\n\nВитрата має не лише суму, а й швидкість. Розділ Workbook про сповіщення називає\nцю швидкість burn rate, тобто темпом спалювання бюджету: наскільки швидко,\nвідносно цілі, сервіс витрачає свій бюджет. За burn rate 1 бюджет закінчується\nрівно наприкінці періоду. Для цілі 99,9% за 30 днів таблиця з Workbook виглядає\nтак:\n\n```text\nBurn rate   Частка помилок   Бюджет вичерпано через\n1           0,1%             30 днів\n2           0,2%             15 днів\n10          1%               3 дні\n1 000       100%             43 хвилини\n```\n\nСповіщати за burn rate краще, ніж піднімати чергового щоразу, коли частка\nпомилок перевищує 0,1%: тоді його будив би кожен короткий сплеск. Workbook\nрадить стежити за кількома значеннями burn rate водночас, кожне — у довгому й\nкороткому вікні. Його відправна точка для цілі 99,9% піднімає чергового, коли за\nгодину витрачено 2% 30-денного бюджету (burn rate 14,4) або за шість годин — 5%\n(burn rate 6), і відкриває тікет, коли за три дні витрачено 10% (burn rate 1).\nКоротке вікно, що становить дванадцяту частину довгого, змушує тривогу вщухнути\nневдовзі після того, як минула проблема. У прикладі з Workbook середнє в\nкороткому вікні опускається нижче порогу через п'ять хвилин після того, як\nпомилки припинилися, а середнє за годину лишається вищим за поріг ще цілу\nгодину.\n\nУ файлі правил Prometheus дві умови для виклику чергового виглядають так.\nЧастки — це recording rules, названі так само, як у Workbook, і кожна містить\nчастку невдалих запитів за вікно, вказане в її назві:\n\n```yaml\ngroups:\n  - name: orders-error-budget\n    rules:\n      - alert: OrdersErrorBudgetBurn\n        expr: |\n          (\n            job:slo_errors_per_request:ratio_rate1h{job=\"orders\"}\n              \u003e (14.4 * 0.001)\n            and\n            job:slo_errors_per_request:ratio_rate5m{job=\"orders\"}\n              \u003e (14.4 * 0.001)\n          )\n          or\n          (\n            job:slo_errors_per_request:ratio_rate6h{job=\"orders\"}\n              \u003e (6 * 0.001)\n            and\n            job:slo_errors_per_request:ratio_rate30m{job=\"orders\"}\n              \u003e (6 * 0.001)\n          )\n        labels:\n          severity: page\n```\n\nПростежмо через нього одне невдале розгортання. О 14:00 реліз починає зривати 2%\nзапитів на замовлення, а це burn rate 20. П'ятихвилинна частка перетинає межу\n1,44% протягом чотирьох хвилин, але годинна досягає її лише тоді, коли помилки\nтривають уже близько 43 хвилин, тож чергового піднімають приблизно о 14:43. На\nтой момент витрачено рівно 2% місячного бюджету, і в цьому компроміс, на який\nіде правило: короткий сплеск нікого не будить, а тривале спалювання не\nсховається. Відкотіть реліз о 14:50, і п'ятихвилинна частка опуститься нижче\nмежі протягом двох хвилин, тож тривога припиниться; сама лише годинна частка\nтримала б її приблизно до 15:07.\n\nТримати сповіщення співмірними з проблемою — та сама турбота, що стоїть за\n[моніторингом помилок і трасуванням](/uk/portfolio/built-first-party-error-monitoring-and-tracing/)\n2025 року, які компанія створила власними силами. Вони виявляють сплески й\nрегресії з паузою між сповіщеннями, тож одне невдале розгортання не піднімає\nчергового сорок разів, правила сповіщень підігнано саме під цю платформу, а не\nпід абстрактну, і одне з 11 операторських подань відведено цілям рівня\nобслуговування.\n\n## Де виникають проблеми\n\n**Облік збою плутають із пошуком винних.** Усе, що відчувають користувачі,\nвитрачає бюджет, але не все має зупиняти власні релізи команди. Приклад політики\nз Workbook дозволяє продовжувати роботу над функціями, коли збій спричинила\nпроблема з мережею в масштабі всієї компанії або сервіс іншої команди, якщо та\nкоманда сама заморозила свої релізи; коли ж бюджет витратила власна помилка чи\nпроцедура команди, надійність стає першочерговою. Для збою, спричиненого\nзалежністю від іншої команди, розділ Implementing SLOs описує дві школи,\nпрацювати далі або все одно заморозити релізи, і каже, що заморожування робить\nкористувачів задоволенішими. Виберіть заздалегідь, запишіть вибір у політику й\nвизначте, хто розв'язує суперечки щодо підрахунку; приклад політики передає їх\nCTO.\n\n**Помилки потрапляють не в ту категорію.** Невдалий навантажувальний тест чи\nвідхилені запити пентестера витрачають бюджет, хоча жоден користувач не\nпостраждав, і приклад політики називає неправильно класифіковані помилки одним\nзі способів марно втратити бюджет. Зворотне ще гірше: справжні збої, записані як\nщось нешкідливе, тримають сервіс у межах цілі на папері, тоді як користувачі\nстраждають, і та сама політика робить роботу над надійністю обов'язковою, коли\nтаке виявлено. Не пускайте в індикатор трафік, якого ціль не охоплює, і\nперевіряйте класифікацію після кожного інциденту, вартість якого виглядала\nдивно.\n\n**Великий інцидент оплачують і забувають.** Заморожування дає час, але не\nрозуміння. Приклад політики пов'язує одне з іншим: окремий інцидент, що витратив\nпонад 20% чотиритижневого бюджету, вимагає постмортему щонайменше з одним\nзавданням найвищого пріоритету, а клас збоїв, що за квартал витратив понад 20%,\nмає потрапити до плану наступного кварталу.\n\n**Тривога ніколи не спрацює.** Пороги, скопійовані з таблиці для 99,9%, не\nпереносяться на інші цілі. За доступності 90%, зауважує Workbook, повний збій\nвитрачає за годину лише 1,4% бюджету, тож правило, яке піднімає чергового на 2%\nза годину, мовчатиме весь цей час. На іншому кінці шкали місячну ціль 99,999%\nповний збій вичерпує за 26 секунд, швидше, ніж багато систем моніторингу\nвстигають зібрати хоча б одне вимірювання. Налаштуйте вікна й пороги під ціль, а\nдля дуже високих цілей прийміть висновок Workbook, що захистити їх може лише\nпроєктування системи: спершу розгорніть зміну на 1% користувачів, і той самий\nзбій лишить 43 хвилини до вичерпання бюджету.\n\n**Через низький трафік одна помилка піднімає чергового.** Якщо на годину\nприходить десять запитів, один невдалий запит дає 10% помилок за цю годину. Для\nцілі 99,9%, зазначає Workbook, цей єдиний запит одразу піднімає чергового, бо\nвитрачає 13,9% 30-денного бюджету: за весь місяць дозволено лише сім збоїв.\nWorkbook пропонує генерувати штучний трафік, об'єднати кілька малих сервісів в\nодин для моніторингу або змінити продукт так, щоб один невдалий запит важив\nменше.\n\n**Ціль підвищують раніше, ніж сервіс здатен її виконати.** Команда, якій\nпотрібна суворіша ціль і яка запроваджує її одразу, живе в постійному аварійному\nрежимі, а бюджет у неї завжди витрачено. Workbook натомість пропонує амбітну\nціль: її вимірюють і відстежують поряд із поточною, але в політиці зазначають,\nщо вона не вимагає жодних дій, доки сервіс не буде до неї готовий.\n\n## Що почитати далі\n\n- [Embracing Risk](https://sre.google/sre-book/embracing-risk/) — розділ 3\n  книжки Google про Site Reliability Engineering, де бюджет помилок запроваджено\n  як спосіб ухвалювати рішення про релізи на основі даних.\n- [Alerting on SLOs](https://sre.google/workbook/alerting-on-slos/) — SRE\n  Workbook про burn rate, сповіщення з кількома вікнами й сервіси з малим\n  трафіком.\n- [Example Error Budget Policy](https://sre.google/workbook/error-budget-policy/)\n  — повна політика: коли релізи зупиняються, які збої є винятками і коли\n  потрібен постмортем.\n- [Implementing SLOs](https://sre.google/workbook/implementing-slos/) — як\n  вивести бюджет із цілі й використати його, щоб вибрати, у що вкладати зусилля\n  з надійності.\n- [Alerting rules](https://prometheus.io/docs/prometheus/latest/configuration/alerting_rules/)\n  — документація Prometheus про формат файлу правил, використаний вище.\n\n\u003chttps://engineer.company/uk/glossary/error-budget/\u003e\n","date_modified":"2026-11-12T05:34:23Z","description":"Як рахують і витрачають бюджет помилок, що таке burn rate, як налаштувати на нього сповіщення і що робить команда, коли бюджет вичерпано.","formats":{"gemtext":"https://engineer.company/uk/glossary/error-budget/index.gmi","gopher":"https://engineer.company/uk/glossary/error-budget/gophermap","html":"https://engineer.company/uk/glossary/error-budget/","json":"https://engineer.company/uk/glossary/error-budget/index.json","markdown":"https://engineer.company/uk/glossary/error-budget/index.md","pdf":"https://engineer.company/uk/glossary/error-budget/index.pdf"},"kind":"page","language":"uk","title":"Що таке бюджет помилок?","url":"https://engineer.company/uk/glossary/error-budget/","version":1}