Ваше утро в пятницу началось с плохих новостей. Пришёл счёт за облачные услуги. Не на 500 долларов. Не на 10 тысяч.
На миллиарды долларов.
Для клиентов AWS, которые в пятницу смотрели на свои дашборды, цифры были нереальными. Некоторые видели оценки стоимости услуг, которые они даже не включали. Amazon подтвердила, что сбой реален. Их портал биллинга показывает фиктивные долги на суммы от миллионов до миллиардов долларов.
Как ошибка вычислений вызвала ложные начисления
Проблемы начались поздним вечером четверга. Amazon заметила неточности в данных биллинга. Компания попыталась применить исправление, а именно — откатить недавние изменения в подсистеме вычислений биллинга AWS. Это не помогло.
К утренним часам пятницы паника охватила пользователей. Скриншоты заполонили Reddit. Один пользователь сообщил о начислении почти в 2,5 миллиарда долларов. Другие демонстрировали вкладки со счетами на сотни миллионов.
Почему это важно? Потому что паника стоит времени. Команды ИТ-операций лихорадочно проверяли журналы использования, убеждаясь, что они не обслуживают центры обработки данных в других странах. На самом деле они выполняли обычные рабочие нагрузки.
Цифры на экранах неверны.
Оценки биллинга не отражают фактическое использование и начисления. — Страница статуса Amazon
Если вы один из таких пользователей, сделайте глубокий вдох. Скорее всего, вы не будете оплачивать этот фиктивный счёт. Amazon заявляет, что эти цифры являются оценками, основанными на некорректных данных.
Где проверить статус AWS прямо сейчас
Ваши сервисы работают? Вероятно, да. Amazon не подтвердила TechCrunch, были ли какие-либо аккаунты приостановлены или заморожены. Представитель компании Айша Джонсон отслала журналистов к странице статуса и отказалась давать дальнейшие комментарии.
Это стандартная корпоративная отговорка. Но молчание говорит об urgency (срочности) ситуации. Это не мелкая правка интерфейса. Это фундаментальная ошибка в том, как рассчитываются деньги.
Оценочное время устранения проблемы составляет «несколько часов». Так что произойдёт после решения проблемы?
- Сброс данных: Бэкенд-числа должны синхронизироваться с реальным использованием.
- Корректировка счёта: Счета-фактуры должны обновиться автоматически.
- Ревизия аккаунта: Проверьте, не было ли ограничения скорости (throttling) у каких-либо сервисов в этот период.
Возврат средств не потребуется, если вы ещё не были списаны. «Долг» существует только в сломанном фронтенде или промежуточной базе данных. Он ещё не поступил на терминал кредитной карты. По крайней мере, именно на это указывает официальное заявление.
Почему это произошло? Пока мы не знаем. Была ли это ошибка развёртывания кода? Неудачная миграция схемы базы данных? Amazon держит детали при себе. Они упомянули, что «недавнее изменение» не сработало.
Мы все привыкли к тому, что программное обеспечение ломается. Код хрупкий. Но заставить его выглядеть так, будто вы должны ВВП небольшой страны за выходные, проведённые в Lambda-функциях? Это особый вид ужаса.
Часы ремонта всё ещё тикают. Не нервничайте. Следите за своей консолью.
