Bilde: Getty Bilder
Amazon Web Services (AWS) hadde ikke en avslappende søndag kveld før arbeidsuken som venter, med EC2-forekomster i hovedområdet USA-ØST-1 som sliter. Og fra mandag morgen PDT rapporterer noen brukere fortsatt problemer, selv om AWS -statussiden nå rapporterer: “Problemet er fullstendig løst og tjenesten fungerer normalt.”
Det hele begynte klokken 20 : 11 PDT, da AWS -statussiden kunngjorde at plattformen led av forringet ytelse i den viktigste tilgjengelighetssonen. “Eksisterende EC2 -forekomster i den berørte tilgjengelighetssonen som bruker EBS -volumer kan også oppleve svekkelse på grunn av fast IO til det vedlagte EBS -volumet ( s), “sa en melding 30 minutter senere.
“Nylanserte EC2 -forekomster i den berørte tilgjengelighetssonen kan ikke starte på grunn av den forringede volumytelsen.”
Kl. 21.47 PDT sa AWS at feilen var i Amazon Elastic Block Store som ble overbelastet, og at kundene burde “mislykkes” til en annen tilgjengelighetssone.
“Vi fortsetter å gjøre fremskritt med å bestemme årsaken til problemet som forårsaker forringet ytelse for noen EBS-volumer i en enkelt tilgjengelighetssone (USE1-AZ2) i USA-ØST-1-regionen. Vi har gjort flere endringer for å løse den økte ressursen påstand i delsystemet som er ansvarlig for å koordinere lagringsverter med EBS -tjenesten, heter det i meldingen kl. 22:16 PDT.
“Selv om disse endringene har ført til en viss forbedring, har vi ennå ikke sett full gjenoppretting for de berørte EBS -volumene.”
Etter ytterligere 25 minutter sa AWS at reduksjonen hadde virket, var i ferd med å distribuere den fullt ut, og EBS -volumene skulle gå tilbake til det normale i løpet av den neste timen.
I den endelige rapporten, klokken 04:21 PDT, rapporterte AWS at “problemet var forårsaket av økt ressurskonflikt i EBS -delsystemet som var ansvarlig for å koordinere EBS -lagringsverter. Engineering arbeidet med å identifisere årsaken og løse problemet i det berørte delsystemet. Klokken 23.20 PDT, etter å ha distribuert en oppdatering til det berørte delsystemet, begynte IO -ytelsen for de berørte EBS -volumene å gå tilbake til normale nivåer. Kl. 12:05 27. september, IO -ytelse for de aller fleste berørte EBS -volumene i USE1-AZ2 tilgjengelighetssonen fungerte normalt. Men fra klokken 12:12 PDT så vi at utvinningen bremset for et mindre sett med berørte EBS-volumer, i tillegg til at vi så forringet ytelse for et lite antall ekstra volumer i USE1- AZ2 tilgjengelighetssone. “
AWS fortsatte, “Engineering undersøkte årsaken og satte på plass avbøtninger for å gjenopprette ytelsen for det mindre settet med gjenværende berørte EBS -volumer. Disse reduseringene forbedret sakte ytelsen for de gjenværende mindre settene av berørte EBS -volumer, med full drift gjenopprettet med 3: 45 AM PDT. Selv om nesten alle EBS -volumene har kommet seg fullt ut, fortsetter vi å jobbe med å gjenopprette et lite sett med EBS -volumer. Vi vil kommunisere gjenopprettingsstatusen for disse volumene via Personal Health Dashboard. Mens flertallet av berørte tjenester har helt gjenopprettet, fortsetter vi å gjenopprette noen tjenester, inkludert RDS -databaser og Elasticache -klynger. Vi vil også kommunisere gjenopprettingsstatusen for disse tjenestene via Personal Health Dashboard. ”
Mens AWS opplevde problemer, ble andre nettsteder også rammet av ytelsesproblemer.
“Hold fast, folkensignaler er for øyeblikket nede på grunn av en hostingbrudd som påvirker deler av tjenesten vår. Vi jobber med å få ta sikkerhetskopi, “twitret meldingstjenesten.
Nest sa at brukerne hadde problemer med å logge på, men situasjonen var løst.
I skrivende stund sa Xero at det led av treghet.
For å oppsummere, som Thaddeus E. Grugq, twitret tweeted, “Internett var designet for å overleve atomkrig, ikke AWS som går ned.”
Oppdatering kl. 10 EDT, 27. september: Lagt til ytterligere statusoppdatering.
Relatert dekning
Amazon Web Services gjør seg klar til å trekke seg tilbake fra en av sine eldste cloud computing -tjenesterAWS kunngjør plan om lansering AWS Australia for jevnere fakturering og kontraktering AWS gjør EKS Anywhere allment tilgjengelig AWW for å lansere første datasenterregion i New Zealand innen 2024 AWW introduserer Amazon MemoryDB for RedisNFL og AWS avslører ny 4. ned -beregning for å bedømme om favorittcoachen din ringte riktig
Relaterte emner :
Amazon Digital Transformation Data Centers CXO Innovation Storage 