Cost Explorer, budżety i tagi alokacji kosztów

Bez wglądu w wydatki AWS optymalizacja kosztów jest niemożliwa. Nie można poprawić tego, czego nie można zmierzyć. AWS udostępnia trzy podstawowe narzędzia zapewniające widoczność kosztów: Cost Explorer do analizowania historycznych i prognozowanych wydatków, AWS Budgets do proaktywnych alertów, gdy wydatki przekroczą wartości progowe, oraz Cost Allocation Tags do rozbijania kosztów według zespołu, projektu lub środowiska. Razem narzędzia te zapewniają podstawę zarządzania finansowego wymaganą przez filar optymalizacji kosztów Well-Architected.

AWS Cost Explorer udostępnia wizualny interfejs i API do analizowania danych dotyczących kosztów i użycia AWS. Mogą Państwo wyświetlać wydatki według usługi, regionu, konta, typu zasobu, znacznika i okresu. Cost Explorer udostępnia również 12-miesięczne prognozy wydatków oparte na trendach historycznych, raporty pokrycia RI i Savings Plans oraz wykrywanie anomalii kosztowych, które wykorzystuje ML do ostrzegania o nieoczekiwanych zmianach wzorców wydatków. Cost Explorer należy włączyć w konsoli Billing — zapełnienie danych zajmuje 24 godziny.

AWS Cost Anomaly Detection wykorzystuje uczenie maszynowe do ciągłego monitorowania kosztów i ostrzegania o nieoczekiwanych wzrostach. Narzędzie uczy się typowych wzorców wydatków i wykrywa statystycznie istotne odchylenia. Należy skonfigurować monitory anomalii (co ma być monitorowane: usługa, połączone konto, kategoria kosztów lub znacznik) oraz subskrypcje alertów (wiadomość e-mail przez SNS lub webhook Slacka, gdy anomalie przekroczą próg). Anomaly Detection jest niezwykle przydatne do wykrywania gwałtownie rosnących kosztów Lambda, przypadkowego uruchomienia dużych instancji EC2 lub nieoczekiwanych opłat za transfer danych, zanim koszty te eskalują.

AWS Budgets umożliwia ustawianie niestandardowych progów wydatków i otrzymywanie alertów, gdy rzeczywiste lub prognozowane wydatki je przekroczą. Dostępne są cztery typy budżetów: Cost Budget (kwota w dolarach), Usage Budget (godziny, GB, żądania), RI Utilisation Budget (alert, gdy wykorzystanie spadnie poniżej progu) oraz Savings Plans Utilisation Budget. Dla każdego budżetu można skonfigurować wiele progów alertów (np. 50%, 80%, 100% budżetu oraz 110% wartości rzeczywistej). Powiadomienia są wysyłane pocztą e-mail lub przez SNS, a Budget Actions mogą automatycznie zastosować SCP lub zasady IAM, aby zatrzymać dalsze wydatki.

AWS Budget Actions mogą automatycznie reagować po przekroczeniu progu budżetu — bez udziału człowieka. Można skonfigurować działania, które: zastosują zasadę IAM odmawiającą możliwości uruchamiania nowych instancji EC2; zastosują Service Control Policy (SCP) do celu w AWS Organizations; zatrzymają instancje EC2 lub RDS, które przekroczyły budżet. Przykładowo budżet konta deweloperskiego może automatycznie zatrzymać wszystkie instancje EC2, jeśli miesięczny budżet przekroczy 5000 USD, zapobiegając niekontrolowanym kosztom generowanym przez zapomniane środowiska testowe.

Cost Allocation Tags umożliwiają przypisywanie kosztów AWS do konkretnych wymiarów biznesowych. Występują dwa typy: znaczniki generowane przez AWS (np. aws:createdBy) oraz znaczniki definiowane przez użytkownika (niestandardowe pary klucz-wartość). Przed pojawieniem się znaczników w raportach kosztów należy je aktywować w konsoli Billing. Po aktywacji znaczniki są dostępne w Cost Explorer, CUR i Budgets do filtrowania. Należy zdefiniować taksonomię znaczników: Project, Environment, Team, CostCenter — i egzekwować jej stosowanie za pomocą Tag Policies w AWS Organizations.

Tagi są przydatne tylko wtedy, gdy są stosowane w sposób spójny. Tag Policies w AWS Organizations wymuszają format kluczy i wartości tagów we wszystkich kontach organizacji. Polityka tagów może określać, że tag Environment musi istnieć, a jego wartością musi być jedna z wartości Production, Staging lub Development. Zasoby niespełniające wymagań pojawiają się w raporcie zgodności z polityką tagów. Należy połączyć polityki tagów z regułami AWS Config (np. required-tags), aby wykrywać i zgłaszać nieotagowane zasoby, zanim wygenerują koszty, których nie można przypisać.

AWS Cost and Usage Report (CUR) to najbardziej szczegółowe dostępne dane rozliczeniowe — godzinowe pozycje dla każdego zasobu na koncie, w tym identyfikatory zasobów, tagi, pokrycie Savings Plans oraz koszty blended/unblended. Dane CUR są dostarczane do zasobnika S3 w formacie CSV lub Parquet. Można je odpytywać za pomocą Amazon Athena na potrzeby niestandardowej analizy lub przekazywać do Amazon QuickSight w celu tworzenia pulpitów nawigacyjnych. CUR jest niezbędny organizacjom, które potrzebują szczegółowego showbacku lub chargebacku do jednostek biznesowych.

AWS Cost Categories umożliwiają mapowanie kosztów i użycia na znaczące kategorie biznesowe za pomocą reguł. Można na przykład utworzyć kategorię o nazwie Środowisko produkcyjne, która obejmuje wszystkie zasoby oznaczone tagiem Environment=Production oraz określone identyfikatory kont. Kategorie pojawiają się w Cost Explorer jako wymiar filtrowania, dzięki czemu można łatwo zobaczyć łączne koszty środowiska produkcyjnego i deweloperskiego, nawet jeśli tagowanie jest niespójne. Cost Categories obsługują mapowanie oparte na regułach, dzięki czemu mogą uzupełniać braki lub niespójności w historycznym tagowaniu.

FinOps (Financial Operations for the cloud) to praktyka zarządzania kosztami chmury jako wspólną odpowiedzialnością zespołu, a nie wyłącznie funkcją finansową. Najważniejsze praktyki to: Widoczność — każdy zespół może wyświetlać własne wydatki w Cost Explorer. Odpowiedzialność — zespoły odpowiadają za alokację własnych kosztów i budżety. Optymalizacja — regularne dopasowywanie rozmiaru zasobów oraz przegląd RI/SP. Prognozowanie — przewidywanie przyszłych wydatków za pomocą prognoz Cost Explorer. W AWS praktykę FinOps można wdrożyć przez tworzenie osobnych kont AWS dla zespołów w Organizations, budżetów dla zespołów, polityk tagów i comiesięcznych przeglądów kosztów z liderami zespołów inżynieryjnych.

Prognozowanie w Cost Explorer wykorzystuje historyczne wzorce użycia do przewidywania przyszłych kosztów z wyprzedzeniem do 12 miesięcy. Pomaga to w planowaniu budżetu i pojemności. W przypadku nowych obciążeń, dla których nie ma danych historycznych, przed wdrożeniem należy użyć AWS Pricing Calculator do oszacowania kosztów. Do prognozy należy zawsze dodać bufor 20–30%, aby uwzględnić nieoczekiwany wzrost lub nowe usługi. Organizacje o złożonych strukturach kosztów mogą rozważyć raporty AWS Budgets**, które automatycznie generują miesięczne podsumowania kosztów dostarczane pocztą e-mail lub do S3.

W tej lekcji nauczył się Pan / nauczyła się Pani, że: Cost Explorer analizuje historyczne i prognozowane wydatki oraz wykrywa anomalie kosztowe, AWS Budgets zapewnia proaktywne alerty i automatyczne Budget Actions po przekroczeniu progów, a Cost Allocation Tags umożliwiają showback i chargeback poprzez przypisywanie kosztów do zespołów, projektów i środowisk. Tag Policies w AWS Organizations wymuszają spójne tagowanie. Następnie omówimy S3 oraz techniki optymalizacji kosztów pamięci masowej i transferu danych.