Neveikimo įspėjimai, kurie kviečia vis kitą, kol kas nors sureaguoja.
Uptimia iškviečia jūsų komandą per 12 kanalų — Slack, SMS, WhatsApp, PagerDuty ir kitus. Jei niekas nereaguoja, įsijungia kita pakopa ir iškviečiamas kitas žmogus; vienu paspaudimu tai sustabdoma.
Dashboard
Monitoring34
Incidents1
Logs
Status Pages
Reports
Alerting
People
Configuration
Incidents#4211 — Checkout
Checkout
incident
UpDown
Acknowledged — alerts stopped
Jul 28
https://checkout.caldmont.compolicy: Ops ladder · 3 steps
Incident—Openno open incidentssince 14:32:11 · HTTP 503
Alerts Sent04ladder armed · 3 stepsSlack · Email · SMS · WhatsApp
Escalationidle2of 3Ops ladder armedstep 3 cancelled — acknowledged
Acknowledged—14:38waiting for incidentby Sara · signed link
Timeline
alerts stop when someone acknowledges
—14:32:11
Escalation ladder armedIncident #4211 opened3 steps · fires the moment an incident confirmsCheckout · HTTP Error 503 Service Unavailable · confirmed by 3 locations
t+014:32:14
Step 1 — fires immediatelyDown alert sentStep 12 contacts
Slack — #opscaldmont.slack.com
Email — on-calloncall@caldmont.com
t+5 min14:37:14
Step 2 — if nobody acknowledgesEscalation alert sentStep 2the on-call phoneno acknowledgement after 5 min
SMS — Sara+44 7700 900•••
WhatsApp — Sara+44 7700 900•••
14:38:02
Acknowledged by Saravia the acknowledgement link in the SMS
Escalation paused — step 3 (was due 14:47), later steps and repeat rounds cancelled. No notification sent; the timeline records it.
t+15 min
Step 3 — armedStep 3 — cancelled, never firedStep 3PagerDuty + SMS — engineering leadwas due 14:47 · Sara acted first
Policy — Ops ladder
stops when someone acknowledgesStep 1immediatelySlack #ops · Email on-callarmedsent 14:32 ✓
Step 2+5 minSMS + WhatsApp — Sara, on-callarmedsent 14:37 ✓
Step 3+10 minPagerDuty + SMS — Marco · repeats ×3armedcancelled — acknowledged
What lands on the phone
one SMS · 160-char budget# step 2 · the SMS Sara will get# step 2 · sent 14:37:14 · SMS to Sara
UPTIMIA: Checkout DOWN since 14:32.
Acknowledge: uptimia.com/a/x7Kd2
# the link needs no login — one tap stops the ladder
✓ armed — message written, nothing to send✓ delivered 14:37:14 · link opened 14:38:02
recovery sends UPTIMIA: RESOLVED to everyone who was paged
Recent Incidents
every alert answeredOpen — #4211 Checkoutladder running · 4 alerts sent14:32
#4188 API — resolvedacknowledged by Marco in 2 min · down 41 minJul 27
#4165 Homepage — resolvedacknowledged by Sara in 1 min · down 12 minJul 21
#4131 Checkout — resolvedrepeat round 1 reached Marco · down 58 minJul 9
Įspėjimų kanalai
12
Paspaudimų iki sustabdymo
1
Tikrinimo taškai
171+
Aprėptos šalys
70+
Nuo nepavykusios patikros iki pašalinto sutrikimo
Kaip neveikimo įspėjimas suranda žmogų, kuris gali tai pataisyti — ar 2 val. dienos, ar 3 val. nakties
14:32:18
1 žingsnis — komandos kanalasPatvirtinus iš trijų regionų, akimirksniu keliauja į #ops-alerts ir komandos el. paštą
3 žingsnis: laukia
14:37
2 žingsnis — tikras telefonasPer penkias minutes niekas nepatvirtino, todėl įsijungia kita pakopa: SMS ir WhatsApp
3 žingsnis: laukia
14:38
Vienas paspaudimas: „Perimu“Sara spusteli pasirašytą nuorodą — be prisijungimo; eskalavimas sustoja · MTTA 6 min.
3 žingsnis: laukia
15:03
Vėl veikia — ciklas baigtasAtsistatymo pranešimas keliauja tik tiems, kurie buvo iškviesti
3 žingsnis: nesuveikė
6 minvidutinis patvirtinimo laikas
Niekas nebuvo iškviestas be reikalo.15:03
Eskalavimas pakilo tiek, kiek reikėjo — du žingsnius — ir sustojo vos kam nors perėmus. 3 žingsnis skirtas tai nakčiai, kai niekas neatsiliepia; šiandien jis tylėjo.
kyla, kol kas nors patvirtinavienas patvirtinimas jį sustabdoatsistatymo pranešimas iškviestiesiems12 kanalų · daugkartinės pakopos
O be eskalavimo pakopų? Vienas įspėjimas, vienas kanalas ir viltis, kad kas nors jį pastebės. Naktinė šios istorijos versija — 3 val. nakties prasidėjęs sutrikimas, kurio niekas neperima iki ryto.
niekieno neperimtas
Visi kanalai, kuriuos naudoja jūsų komanda
El. paštas ir SMS veikia iš karto — Slack, Teams, WhatsApp, PagerDuty ir kiti prijungiami per porą paspaudimų.
Slack ir Microsoft TeamsPaskelbiama tinkamame kanale
Discord, Telegram ir MattermostGrupiniai pokalbiai taip pat
WhatsAppŽinutė ten, kur ją pamatysite
PagerDutyTiesiai į budėjimo grafiką
1
incidentas
nukreipiamas į visus jūsų pasirinktus kanalus
El. paštas, SMS ir TwilioVeikia iš karto — nieko nustatinėti nereikia
Webhook ir StatuspageAutomatizavimas ir vieša būsena
Eskalavimo žingsniai gali iškviesti ištisas komandas, atskirus kolegas ar bet kurį vieną kontaktą — ir kiekvienas žingsnis gali naudoti kitokį kanalų derinį.
derinys žingsniui
Eskalavimo pakopos, patvirtinimas ir triukšmo valdymas
Eskalavimo pakopos
Eskalavimo pakopas sukurkite kartą — priskirkite bet kur
Daugkartinės eskalavimo pakopos: kas iškviečiamas pirmas ir kiek laukti, kol apie sutrikimą sužinos kitas žmogus. Priskirkite jas vienam stebėjimo objektui ar šimtui — bet kokio tipo.
- Laukimo trukmę tarp žingsnių nustatote jūs — 1 žingsnis visada suveikia vos patvirtinus sutrikimą
- Pakartojimai, kurie baigiasi — ilgas sutrikimas iškviečia iš naujo tiek kartų, kiek leidžiate
- Niekada netyli — ištrynus ar ištuštinus taisykles įspėjimas keliauja visiems iš karto
1 žingsnis
#ops-alerts + komandos el. paštassuveikia iškart
Slack · El. paštas
+5 min
Sara — budėjimo telefonasjei niekas dar nepatvirtino
SMS · WhatsApp
+15 min
Inžinerijos vadovas + PagerDutyjei vis dar nepatvirtinta
SMS · PagerDuty
↻
Kartoti paskutinį žingsnįkas 30 min. · daugiausia 3 kartai
ribota
Atsistatymas atšaukia visus laukiančius žingsnius — o ištuštintos taisyklės niekada netyli: įspėjimas keliauja visiems iš karto.
1 taisyklė · 24 stebėjimo objektai
Patvirtinimas ir MTTA
Vienas paspaudimas, be prisijungimo
Kiekviename įspėjime yra pasirašyta patvirtinimo nuoroda. Spustelėkite ją SMS žinutėje, Slack ar el. laiške — ir eskalavimas sustoja. Jokio slaptažodžio 3 val. nakties — niekada.
- Nuorodos, atsparios skaitytuvams — patvirtina tik mygtukas patvirtinimo puslapyje, todėl el. pašto skaitytuvai negali nutildyti įspėjimo
- Apsauginis tinklas — eskalavimas gali atsinaujinti, jei praėjus nustatytam laikui po patvirtinimo svetainė vis dar neveikia
- MTTA kiekviename incidente — kas patvirtino, kada ir per kiek minučių
SMSsu pasirašyta nuoroda
Slacksu pasirašyta nuoroda
El. paštassu pasirašyta nuoroda
Patvirtinti šį incidentą?
Neveikia — checkout.caldmont.com, nuo 14:32. Vienas paspaudimas sustabdo eskalavimą — niekada jokio slaptažodžio. Patvirtina tik patvirtinimo mygtukas, todėl el. pašto skaitytuvai negali jo nutildyti.
✋ Perimupatvirtino Sara · MTTA 6 min.
Vėl veikia 15:03 — pranešimas visiems, kurie buvo iškviesti. Eskalavimas gali atsinaujinti, jei praėjus nustatytam laikui po patvirtinimo svetainė vis dar neveikia.
MTTA užfiksuotas
Triukšmo valdymas
Tik tie įspėjimai, dėl kurių verta keltis
Uptimia kiekvieną sutrikimą pirma patvirtina iš kelių regionų ir tik tada ką nors iškviečia, o susijusius gedimus sujungia į vieną incidentą, o ne į dešimt.
- Įspėjimų grupavimas — kartu sugedę toms pačioms pakopoms priskirti stebėjimo objektai virsta viena suvestine, vienu eskalavimu ir vienu atsistatymo pranešimu
- Tylos valandos kiekvienam žmogui — naktimis ir savaitgaliais iškvietimai laukia ryto
- Priežiūros laikotarpiai ir pristabdymas — suplanuoti darbai niekada nieko neiškviečia; pristabdytas stebėjimo objektas atšaukia savo laukiančius įspėjimus
www.caldmont.comPayments eskalavimo pakoposeneveikia
api.caldmont.comPayments eskalavimo pakoposeneveikia
checkout.caldmont.comPayments eskalavimo pakoposeneveikia
1 grupuotas incidentas#ops-alerts · 14:32
Trys toms pačioms pakopoms priskirti stebėjimo objektai sugedo kartu — viena suvestinė, vienas eskalavimas, vienas atsistatymo pranešimas. Vieno patvirtinimo pakanka visiems trims.
ne 3 iškvietimai× kiekvienas kanalas× kiekvienas žingsnis
Tylos valandos sulaiko iškvietimus iki ryto, o per priežiūros laikotarpius patikros praleidžiamos — suplanuoti darbai niekada nieko neiškviečia.
kiekvienam žmogui
Komandos vaidmenys
Visa komanda — ir niekam per daug teisių
Pakvieskite komandą el. paštu ir kiekvienam suteikite tiek teisių, kiek reikia — penki vaidmenys: nuo visateisio administratoriaus iki stebėtojo, kuris gali tik matyti ir patvirtinti.
- Stebėtojai gali patvirtinti — tik nieko negali pakeisti
- Nemokama vieta buhalterijai — mato tik sąskaitas, niekada stebėjimo objektų
- Komandos veiksmų žurnalas — kiekvienas pakvietimas, vaidmens keitimas ir pašalinimas įrašomas
Savininkasviskas, įskaitant mokėjimusvisos teisės
Administratoriusviskas, išskyrus mokėjimus
Redaktoriusstebėjimo objektai, bet ne komanda
Stebėtojastik peržiūra, bet gali patvirtintigali patvirtinti
Mokėjimaitik sąskaitos — jokių stebėjimo objektųnemokama vieta
Vaidmenys, kurie iš tikrųjų galiojakiekviena užklausa
Penki vaidmenys, tikrinami kiekvienoje užklausoje — stebėtojas stebėjimo objekto nepakeis, net jei labai norės. Pakvieskite el. paštu; iki 100 vietų.
pakvietimas el. paštu100 vietų
Kiekvienas pakvietimas, vaidmens keitimas ir pašalinimas įrašomas — pilnas komandos veiksmų žurnalas.
veiksmų žurnalas
Prastova turėtų iškviesti jus.Ne klientas.
Eskalavimo pakopos, patvirtinimas ir komandos vietos įskaičiuoti į plano kainą — jokio mokesčio už kiekvieną vietą ir jokių mokamų priedų.
Išbandykite nemokamai 30 dienų →
30 dienų nemokamai
be kreditinės kortelės
atšaukite bet kada
Kaip veikia įspėjimų eskalavimas
Trys nustatymo žingsniai — toliau viskuo rūpinasi Uptimia.
1 žingsnis2 minutės
Prijunkite kanalus ir kolegas
Pridėkite kanalus, kuriuos komanda jau naudoja, pakvieskite žmones el. paštu ir kiekvienam priskirkite vaidmenį.
Įspėjimų kanalai
El. paštasSlackSMSWhatsApp+ dar 8
Pakviesti kolegą
sara@caldmont.com
vaidmuo: redaktorius · pakvietimas išsiųstas
2 žingsnis1 minutė
Eskalavimo pakopas sukurkite kartą
Kas iškviečiamas pirmas, kas paskui ir kiek laukti. Priskirkite šią taisyklę bet kuriems stebėjimo objektams.
1 žingsnis · iškart
#ops-alerts · Slack + el. paštas
2 žingsnis · po 5 min.
Budėjimo telefonas · SMS
3 žingsnis · po 15 min.
Inžinerijos vadovas · SMS + PagerDuty
AtšauktiPriskirti 24 stebėjimo objektams →
3 žingsnisautomatiškai
Toliau viską sutvarko Uptimia
Patvirtinti sutrikimai kyla pakopomis, kol kas nors juos perima. Atsistačius veikimui, siunčiamas pranešimas, kad viskas gerai.
Uptimia 14:32
⚠ Neveikia — checkout.caldmont.com
Jei niekas nepatvirtins, po 5 min. įsijungs kita pakopa
Taip pat įskaičiuota
Visavertė REST API
Tvarkykite stebėjimo objektus, kontaktus ir komandos narius iš CI ar skriptų — v1 ir v2 API, raktai kiekvienam naudotojui.
POST /api/v2/users → 201 · role: editor · invite sent
Atsistatymo pranešimai
Pranešimas, kad viskas gerai, keliauja visiems, kurie buvo iškviesti — kartu su sutrikimo trukme.
✓ vėl veikia · neveikė 31 min. · išsiųsta 4
Incidentų istorija
Kiekvienas incidentas išsaugomas su savo laiko juosta — kas buvo iškviestas, kas patvirtino, kada viskas atsistatė.
#4128 · patvirtinta per 6 min. · išspręsta
Vieši būsenos puslapiai
Pasakykite klientams, kas vyksta — dar prieš jiems rašant į pagalbą.
status.yourdomain.com · aktyvu
Suplanuotos ataskaitos
Veikimo laiko ir incidentų suvestinės el. paštu su jūsų logotipu.
kas savaitę · pirmadienį 08:00 · PDF
Vienas kontaktų sąrašas visiems stebėjimo tipams
Veikimo, SSL, veikimo signalo, DNS, API ir operacijų stebėjimo objektai iškviečia tuos pačius kontaktus, eskalavimo pakopas ir komandas — nustatote vieną kartą.
www.caldmont.comUPTIME
api.caldmont.comSSL
db-backup · nightlyHEARTBEAT
Kas yra įspėjimų eskalavimo taisyklės?
Įspėjimų eskalavimo taisyklės nustato, kas informuojamas apie incidentą, kokia eile ir kiek laukti atsakymo, kol įspėjamas kitas žmogus. Pradedama nuo siauriausio rato — komandos kanalo, tada budėjimo telefono, tada vadovo — ir kilti nustojama vos kam nors patvirtinus.
Be taisyklių
Įspėjimas visiems iš karto
Incidentas
patvirtintas sutrikimas
vienas pliūpsnis · akimirksniu
Visi
visi gavėjai · visi kanalai
Visi sužino apie viską — tokia numatytoji kiekvieno stebėjimo objekto nuostata, taikoma ir pašalinus taisyklę.
Su taisyklėmis
Įspėjimai su eskalavimu
Incidentas
patvirtintas sutrikimas
nepatvirtinta? kitas žingsnis
Eskalavimo pakopos
1 → 2 → 3 žingsnis · sustoja po pirmo patvirtinimo
Įspėjimai kyla tik tol, kol niekas neatsiliepia — mažiau trukdžių ir nė vieno sutrikimo be atsako.
Pavyzdys
Trijų žingsnių eskalavimo taisyklės
Dauguma incidentų baigiasi ties 1 žingsniu; likusieji kyla, kol kas nors pasako „Perimu“ — o ribotas pakartojimas neleidžia ilgam sutrikimui nutilti.
Kaip eskalavimas veikia Uptimia sistemoje →| Žingsnis | Kada | Kas iškviečiamas | Kanalai |
|---|---|---|---|
| 1 | iškart | #ops-alerts + komandos el. paštas | SlackEl. paštas |
| 2 | +5 min., nepatvirtinta | budėjimo telefonas | SMSWhatsApp |
| 3 | +15 min., nepatvirtinta | inžinerijos vadovas | SMSPagerDuty |
| ↻ | kas 30 min., kol neveikia | kartojasi paskutinis žingsnis · daugiausia 3 kartai | kol patvirtinama |
Dažni klausimai apie neveikimo įspėjimus
01Kaip gauti įspėjimą, kai svetainė nustoja veikti?+
Sukurkite stebėjimo objektą ir pasirinkite kanalus. Uptimia tikrina svetainę iš 171+ vietų, patvirtina sutrikimą iš kelių regionų ir tik tada įspėja bet kuriuo iš 12 kanalų — el. paštu, SMS, per Slack, Microsoft Teams, Discord, Mattermost, Telegram, WhatsApp, PagerDuty, Twilio, webhook ir Atlassian Statuspage.
02Kas yra įspėjimų eskalavimo taisyklės?+
Daugkartinės eskalavimo pakopos, kurios nustato, kas įspėjamas, kokia eile ir kiek laukti prieš iškviečiant kitą žmogų. Vienoje taisyklėje gali būti iki 10 žingsnių. Rengyklėje kiekvieno žingsnio laukimą galima nustatyti nuo 5 minučių iki 2 valandų, o per API — nuo 1 minutės iki 24 valandų. Abiem atvejais galimas ribotas pakartojimas, o viena taisyklė priskiriama bet kokiam skaičiui bet kokio tipo stebėjimo objektų.
03Kas nutinka, jei niekas nereaguoja į įspėjimą?+
Eskalavimas kyla toliau, pakopa po pakopos: kiekvienas žingsnis palaukia jam nustatytą laiką ir iškviečia kitą žmogų. Po paskutinio žingsnio pasirinktinis ribotas pakartojimas iškviečia iš naujo kas N minučių, o ištrynus ar ištuštinus taisykles įspėjimas keliauja visiems iš karto.
04Kaip veikia įspėjimo patvirtinimas?+
Kiekviename įspėjime yra pasirašyta nuoroda — užtenka paspausti „Perimu“ ir incidentas patvirtinamas, prisijungti nereikia. Eskalavimas sustoja, incidente užfiksuojama, kas ir kada patvirtino, o MTTA (vidutinis patvirtinimo laikas) rodomas incidente ir jo istorijoje. Patvirtinti gali ir tik peržiūros teises turintys kolegos.
05Ar el. pašto skaitytuvai gali netyčia patvirtinti mano įspėjimus?+
Ne. Atidarius nuorodą (o skaitytuvai daro būtent tai) tik parodomas patvirtinimo puslapis — patvirtinama tik paspaudus jame esantį mygtuką.
06Ar Uptimia skambina telefonu?+
Kol kas ne — balso skambučių įspėjimų nėra. Uptimia siunčia SMS visame pasaulyje iš savo vidinio telkinio arba iš jūsų Twilio paskyros, WhatsApp ir Telegram žinutės suskamba kaip bet kuri asmeninė žinutė, o PagerDuty integracija sukuria tikrus PagerDuty incidentus.
07Ar palaikomi budėjimo grafikai?+
Eskalavimo pakopos iš eilės iškviečia nustatytus žmones ir komandas — pagal kalendorių jos nesikeičia. Jei budite pamainomis, nukreipkite vieną žingsnį į PagerDuty integraciją ir toliau viską perims jūsų grafikas; komandoms be oficialių pamainų pakanka pačių pakopų.
08Kaip apsisaugoti nuo įspėjimų nuovargio?+
Keturi būdai: sutrikimas patvirtinamas iš kelių regionų, kol dar niekas neiškviečiamas; susiję sutrikimai sujungiami į vieną grupuotą incidentą; kiekvienam žmogui atskirai nustatytos tylos valandos sulaiko iškvietimus iki ryto; priežiūros laikotarpiai ir pristabdymas palieka suplanuotus darbus tyloje.
09Kiek komandos narių galiu pridėti?+
Didžiausiame plane — iki 100 vietų komandoje, 30 dienų bandyme jų 50. Kiekvienas narys turi savo prisijungimą ir vaidmenį: administratorius, redaktorius, tik peržiūros stebėtojas arba nemokama vieta atsiskaitymams.
10Kuriuose planuose yra eskalavimo pakopos?+
Eskalavimo pakopos — su incidentų grupavimu ir patvirtinimu vienu paspaudimu — įtrauktos į Professional ir aukštesnių planų kainą: niekada neapmokestinamos už vietą, niekada nėra mokamas priedas. Jos įeina ir į 30 dienų bandomąją versiją. Naudojant Basic ar nemokamą planą įspėjimai vis tiek siunčiami į jūsų kanalus — tiesiog visiems iš karto. O jau sukurtos pakopos veikia toliau, net pakeitus planą; Uptimia jų niekada tyliai neišjungia.
11Ar neveikimo įspėjimai tinka ir serveriams, ne tik svetainėms?+
Taip. Tie patys kontaktai, kanalai ir eskalavimo pakopos tinka visiems stebėjimo tipams — ping, TCP prievadų ir DNS patikroms iš išorės bei Uptimia serverių stebėjimui, kuris iš vidaus įspėja apie CPU, atmintį ir diską.
Su sutrikimu daugiau nebesigrumsite vieni.
Prijunkite kanalus, kartą sukurkite eskalavimo pakopas — ir kitas incidentas pats suras reikiamą žmogų.
30 dienų nemokamas bandymas
50 vietų bandymo metu
12 įspėjimų kanalų
Be kreditinės kortelės