← Назад к блогу

Сертификация AWS DevOps против агента, который срезал наш счёт

Сертификация AWS DevOps обещает контроль над облаком. Но когда мы запустили агента на очистку, он срезал счёт лучше, чем ожидали

Сертификация AWS DevOps против агента, который срезал наш счёт

Любой аккаунт AWS обрастает хламом. Песочница, поднятая под демо; стек CloudFormation от проекта, который выкатили год назад; том хранилища, переживший сервер, к которому был подключён. Сегодня ничего из этого ничего не ломает, поэтому уборка съезжает на следующий квартал, а потом на квартал после него. Многое из того, что вбивает в вас сертификация AWS DevOps — управление жизненным циклом CloudFormation, оптимизация затрат, управление ресурсами, — это как раз та самая неблагодарная приборка. Поэтому мы попробовали иначе: вместо того чтобы выделять никому не нужный день, мы дали агенту сделать эту уборку под присмотром. Дальше — о том, что произошло на самом деле, где он застрял и что это значит для того, как студия управляет своим облачным счётом.

Рутина, которую никто не ставит в план

Облачный хлам ведёт себя как абонемент в спортзал, который вы забыли отменить. В месяц, когда вы перестали ходить, ничего драматичного не происходит. Списание небольшое, автоматическое и прячется внутри большей суммы, на которую вы бросаете взгляд раз в месяц. Умножьте это на пару десятков ресурсов и пару лет — и «мелкие» списания превращаются в статью расходов, о которой уже стоит поговорить.

Отраслевые данные подтверждают это чутьё. В ежегодном отчёте Flexera State of the Cloud Report организации из года в год сами сообщают, что примерно 30% их облачных расходов тратятся впустую. Эта цифра почти не сдвинулась за годы — не потому, что никто не знает, как это исправить, а потому что уборка скучна, слегка рискованна и никогда не срочна. Это определение задачи, которую откладывают.

Вот почему это важно для бизнеса, а не только для счёта: расточительство тихое. Оно не поднимает никого в 3 часа ночи. Оно не всплывает на ретро спринта. Оно просто лежит, и чем дольше лежит, тем сильнее все нервничают трогать его — а вдруг этот стек всё ещё несущий? Этот страх и есть настоящая цена. Он превращает утечку в €40/месяц в постоянную.

Реальные цифры: во что на самом деле обходятся забытые ресурсы

Абстрактные проценты никого не мотивируют. Конкретные строки в счёте AWS — да. Вот опубликованные, реальные цены на типичные остатки:

  • NAT Gateway, который вы забыли снести, стоит около $0,045 в час в большинстве регионов — примерно $33 в месяц ещё до платы за обработку данных. Оставьте пару таких от старых VPC — и это ~$800 в год ни за что.
  • Неприкреплённые Elastic IP. С февраля 2024 года AWS берёт $0,005 в час за каждый публичный адрес IPv4, прикреплён он или нет, — около $3,60 в месяц за каждый. По отдельности мелочь; но стая «сирот» набегает.
  • Старые тома и снапшоты EBS. Забытый том gp3 на 100 ГБ обходится примерно в $8 в месяц по $0,08/ГБ. Снапшоты копятся по ~$0,05 за ГБ-месяц и редко чистятся, потому что удаление бэкапа ощущается опасным.
  • Простаивающие инстансы RDS, оставленные работать после миграции, могут тихо списывать больше, чем всё вышеперечисленное вместе взятое.

Ничего экзотического. Это оставшиеся коробки на складе, за площадь под которые вы всё ещё платите аренду. Честно говоря: по отдельности они не стоят половины дня инженера — именно поэтому их никогда не чистят. Экономика внимания перевёрнута: исправление стоит больше сосредоточенности, чем экономит любой отдельный пункт, поэтому за него никто не берётся.

Чистим старые стеки CloudFormation в разговоре с агентом

CloudFormation — правильная точка старта, потому что стек — это манифест. Считайте его упаковочным листом для отправления: опишите его один раз, и AWS создаёт, а позже удаляет каждый ресурс из списка как единое целое. Удалите стек — и, в теории, NAT Gateway, тома, security-группы и роли IAM уходят вместе с ним. Это чистая версия уборки — никаких «сирот», потому что манифест отслеживает каждую коробку.

Задачу агента легко описать и муторно делать руками: перечислить стеки, сказать, какие последний раз обновлялись больше года назад, кратко описать, что содержит каждый, и пометить всё, что выглядит близким к продакшену. Вместо кликанья по консоли стек за стеком работа стала разговором — «покажи мне стеки, которых не касались с прошлого года, сгруппированные по тому, сколько стоит их держать». Агент выгрузил инвентарь, сопоставил его с примерной стоимостью и предложил порядок удаления, начиная с очевидно мёртвых.

Две вещи сделали это безопасным, а не безрассудным. Во-первых, ничего не удалялось без явного подтверждения по каждому стеку — агент предлагал, человек одобрял. Во-вторых, каждое действие фиксировалось в форме, которую мы могли потом перечитать. Второй пункт — не мелочь. Агенту, удаляющему инфраструктуру, можно доверять только если вы можете в точности восстановить, что он тронул и почему, — в этом весь смысл материала почему ваш агент AWS DevOps хорош ровно настолько, насколько хорош его лог. Удаление, которое нельзя проверить, — это удаление, в котором вы будете сомневаться вечно.

Стек, который отказался удаляться

Потом один стек застрял в DELETE_FAILED. Это достаточно частая ситуация, чтобы AWS подробно описал её в своём руководстве по устранению неполадок CloudFormation. Стек попадает в это состояние, когда CloudFormation не может удалить один из своих ресурсов — обычно потому, что от него зависит что-то вне манифеста, в бакете S3 всё ещё лежат объекты или у ресурса стоит DeletionPolicy: Retain, который велит AWS его не трогать.

Ручное исправление возни требует и легко ошибиться в пять вечера: определить конкретный ресурс, блокирующий удаление, сохранить именно этот ресурс, удаляя остальной стек, а затем разобраться с упрямцем отдельно. Перепутайте порядок — и вы либо бросите удаление на полпути, либо случайно снесёте то, что блокирующему ресурсу ещё было нужно.

Вот где агент отработал своё содержание. Он прочитал событие сбоя, назвал точный ресурс, который не удалился, и объяснил почему — зависимость, которую исходный шаблон не учёл. Затем он предложил стандартный обходной путь: удалить стек, сохранив проблемный ресурс, убедиться, что остальное исчезло, и разобраться с упрямцем как с осознанным, отдельным решением, а не слепым повтором. Стек очистился. Проще говоря: раздражающая часть рутины — диагностика состояния сбоя и знание правильного аварийного люка — это как раз та часть, с которой агент справляется хорошо, потому что он сопоставляет с задокументированным поведением, а не гадает.

Затем мы направили его на весь аккаунт

Удаление старых стеков покрывает только ресурсы, созданные CloudFormation. Более дорогая проблема — обычно то, что создано руками, наспех, вне какого-либо шаблона: инстанс, запущенный ради одноразового теста, том, отключённый и так и не удалённый, балансировщик нагрузки, оставленный работать после того, как сервис вывели из эксплуатации. За ними не следит никакой манифест, поэтому их никогда не чистят разом.

Поэтому последним шагом было поручить агенту просканировать весь аккаунт на остатки, реально раздувающие счёт: простаивающие ресурсы, неприкреплённое хранилище, шлюзы без трафика, IP-адреса, указывающие в никуда. Он сопоставил то, что запущено, с тем, что реально используется, а затем ранжировал находки по месячной стоимости, чтобы разбор начинался с того, что важно.

Ваш облачный счёт — это, в буквальном смысле, обратная связь, которую никто никогда не набирает словами. Никто не заводит тикет со словами «этот том тратит €8 в месяц впустую» — сигнал похоронен в графике использования, который остаётся плоским, потому что ресурс ничего не делает. Вытаскивать такой невысказанный сигнал — та же дисциплина, о которой мы писали в материале читая обратную связь, которую пользователи никогда не набирают: важная информация редко бывает той информацией, что вам вручают напрямую.

Альтернативы и компромиссы (честное сравнение)

Агент — не единственный способ это сделать, и честно будет взвесить его на фоне инструментов, к которым обычно тянется сертифицированный инженер.

  • AWS Trusted Advisor и Cost Explorer. Собственные Cost Explorer и Trusted Advisor от AWS уже помечают простаивающие балансировщики, недоиспользуемые инстансы и неприкреплённые тома. Они превосходны в поиске расточительства. Проблема в том, что они выдают вам список и на этом останавливаются — вам всё равно надо пойти проверить каждый пункт, понять зависимости и нажать «удалить». Находка дёшева; полдня уходит на действие.
  • Делать это вручную в консоли. Максимум контроля, максимум занудства. Это «правильный» подход, который никогда не случается, потому что он конкурирует с выкаткой фич и всегда проигрывает. Надёжность, которая держится на том, что человек вспомнит сделать скучную задачу, — это не надёжность.
  • Собственные скрипты и гигиена Infrastructure-as-Code. Написать скрипт, который выметает осиротевшие ресурсы, — профессиональный ответ, и для большого аккаунта это правильная долгосрочная инвестиция. Компромисс — затраты на старте: вам надо построить, протестировать и поддерживать этот «веник», а скрипт ловит только те случаи, которые вы предусмотрели. Он не станет рассуждать о новой причине DELETE_FAILED, которую никогда не видел.
  • Сторонние FinOps-платформы. Мощны для крупных организаций, избыточны для студии с одним-двумя аккаунтами и добавляют вендора и ежемесячную плату к проблеме, на которой вы пытаетесь сократить расходы.

Вот что мы рекомендуем: используйте Trusted Advisor и Cost Explorer как источник истины о том, что расточительно — они бесплатны и авторитетны, — а агента используйте для действия: разбор списка, объяснение зависимостей, обработка застрявших состояний и выполнение удалений по одному подтверждению за раз. Всё, что вы будете повторять по расписанию, доводите до настоящего скрипта. Агент — быстрый путь к чистому аккаунту сегодня; скрипт — то, как вы держите его чистым, не думая об этом.

Что это значит для навыков, стоящих за сертификацией AWS DevOps

Здесь притаилось естественное беспокойство: если агент способен рассуждать о жизненных циклах CloudFormation и оптимизации затрат, важна ли ещё человеческая экспертиза, стоящая за сертификацией AWS DevOps? Она важнее, а не менее важна — но рычаг смещается. Ценность сертификации никогда не была в том, чтобы помнить, что DELETE_FAILED может быть вызван политикой retain. Она — в суждении: знать, какой стек безопасно трогать, когда «мусорный» ресурс на самом деле — тёплый резерв, и где автоматическая уборка может обрушить что-то тихо несущее.

Агент взял на себя механический слой — инвентаризацию, корреляцию, задокументированный обходной путь. Человек удержал слой суждения — одобрение, контекст и решение по неоднозначным случаям. Это то же разделение труда, которое заставляет автоматизацию работать в любой команде, и в этом суть материала как DevOps на самом деле работает в реальных командах: инструменты не заменяют ответственность, они переносят внимание человека на решения, которым действительно нужен человек.

Главный вывод для бизнеса

Уборка — решённая проблема, которая остаётся нерешённой по организационным, а не техническим причинам. Инструменты для поиска расточительства существуют годами; не хватало дешёвого способа действовать по находкам, не сжигая на это фокус инженера.

Три вывода, которые стоит сохранить:

  1. Барьером никогда не было знание — им было внимание. По отрасли впустую тратится примерно 30% облачных расходов, и исправление всегда было доступно. Агент снижает стоимость делания скучной, рискованной части настолько, что она наконец делается.
  2. Оставьте за человеком одобрение и лог. Право на удаление осталось за человеком, и каждое действие можно проверить. Автоматизация, которую нельзя восстановить постфактум, — это обуза, а не удобство.
  3. Превратите разовое в привычку. Первый проход разгребает завал. Настоящая победа — поставить регулярное сканирование аккаунта на расписание, чтобы расточительство больше никогда не наросло в тот самый парализующий страх «а вдруг оно несущее?».

Честно говоря: агент не сделал ничью экспертизу по AWS устаревшей. Он лишь убрал оправдание держать аккаунт в бардаке — и это ценнее, чем счёт, который он срезал.

Статья подготовлена на основе открытых источников и может содержать неточности.

Читайте также

✦ВыжимкаAI
  1. Облачный мусор накапливается не из-за незнания, а из-за того, что уборка скучна и слегка пугает: страх «а вдруг стек несущий» превращает утечку в €40/месяц в постоянную статью расходов. Flexera фиксирует ~30% waste из года в год — цифра не меняется именно поэтому.
  2. Конкретные цифры делают проблему осязаемой: NAT Gateway-сирота — ~$33/мес, каждый «висячий» Elastic IP — $3,60/мес, том EBS 100 ГБ — ~$8/мес; пара-тройка таких остатков от старых проектов даёт $800+ в год ни за что.

Powered by B1KEY