Vaše páteční ráno začalo špatnou zprávou. Obdržel jsem fakturu za cloudové služby. Ne 500 dolarů. Ne za 10tis.
Miliardy dolarů.
Pro zákazníky AWS, kteří se v pátek dívali na své dashboardy, byla čísla neskutečná. Někteří viděli odhady nákladů na služby, které ani nezahrnovaly. Amazon potvrdil, že závada je skutečná. Jejich fakturační portál ukazuje fiktivní dluhy v rozmezí od milionů až po miliardy dolarů.
Jak chyba ve výpočtu způsobila falešné poplatky
Problémy začaly ve čtvrtek pozdě večer. Amazon si všiml nepřesností ve fakturačních údajích. Společnost se pokusila použít opravu, která by vrátila nedávné změny do AWS Billing Compute Engine. Nepomohlo to.
V pátek ráno zachvátila uživatele panika. Screenshoty zaplavily Reddit. Jeden uživatel uvedl poplatek ve výši téměř 2,5 miliardy dolarů. Jiné ukázaly karty obsahující stovky milionů účtů.
Proč je to důležité? Protože panika stojí čas. Provozní týmy IT horečně kontrolovaly protokoly využití, aby se ujistily, že neobsluhují datová centra v jiných zemích. Ve skutečnosti měli běžnou pracovní zátěž.
Čísla na obrazovkách jsou nesprávná.
Odhady účtování neodrážejí skutečné využití a poplatky. — stavová stránka Amazonu
Pokud jste jedním z těchto uživatelů, zhluboka se nadechněte. S největší pravděpodobností tento fiktivní účet nezaplatíte. Amazon říká, že tato čísla jsou odhady založené na chybných datech.
Kde právě teď zkontrolovat stav AWS
Fungují vaše služby? Pravděpodobně ano. Amazon nepotvrdil TechCrunch, zda byly nějaké účty pozastaveny nebo zmrazeny. Mluvčí společnosti Aisha Johnson odkázala reportéry na stavovou stránku a odmítla se k tomu dále vyjádřit.
To je standardní firemní výmluva. Ale mlčení vypovídá o naléhavosti situace. Nejedná se o drobné úpravy rozhraní. To je zásadní chyba ve způsobu výpočtu peněz.
Odhadovaný čas na vyřešení problému je „několik hodin“. Co se tedy stane po vyřešení problému?
- Resetování dat: Čísla backendu musí být synchronizována se skutečným využitím.
- Úprava faktury: Faktury by se měly aktualizovat automaticky.
- Audit účtu: Zkontrolujte, zda během tohoto období nedošlo u některých služeb k omezení.
Vrácení peněz nebude požadováno, pokud vám ještě nebyly účtovány poplatky. “Dluh” existuje pouze v nefunkční frontendové nebo pracovní databázi. Dosud nedorazil na terminál kreditní karty. Alespoň to naznačuje oficiální prohlášení.
Proč se to stalo? Zatím nevíme. Byla to chyba při nasazení kódu? Migrace schématu databáze se nezdařila? Podrobnosti si Amazon nechává pro sebe. Zmínili, že „nedávná změna“ nefungovala.
Všichni jsme zvyklí na rozbití softwaru. Kód je křehký. Ale aby to vypadalo, že dlužíte HDP malé země za víkend funkcí Lambda? Tohle je zvláštní druh hororu.
Hodiny opravy stále tikají. Nebuď nervózní. Sledujte svou konzoli.
