W tej prezentacji skupimy się na praktycznych aspektach zarządzania danymi w chmurze z perspektywy DataOps - przede wszystkim na kosztach i ich optymalizacji. Adam pokaże, gdzie najczęściej „uciekają” pieniądze w systemach opartych o AWS i jak podejmować decyzje architektoniczne, które mają realny wpływ na rachunek. Zaczniemy od S3: lifecycle rules, partycjonowanie, formaty plików i kompresja - czyli rzeczy, które potrafią zrobić ogromną różnicę w kosztach. Porozmawiamy również o Apache Icebergu. Potem przejdziemy do compute: Athena (i dlaczego partycjonowanie ma znaczenie), zastanowimy się, kiedy warto rozważyć inne narzędzie, jak sensownie skalować EMR + Sparka oraz gdzie sprawdza się EMR Serverless i batchowe podejście. Całość spięta będzie praktycznym podejściem do budowania systemów danych, które są nie tylko skalowalne, ale przede wszystkim kosztowo efektywne.

Adam Zuzo - Data Engineer, który na co dzień buduje i rozwija rozwiązania oparte na danych w środowisku chmurowym (głównie AWS). Pracuje z szerokim spektrum danych - od zbiorów liczących setki tysięcy wierszy po miliardy rekordów w skali Big Data. Jeden z liderów poznańskiej grupy AWS, aktywnie zaangażowany w rozwój lokalnego środowiska technologicznego.

Podczas tej prelekcji zajrzymy „pod maskę” usług takich jak Cloud Run oraz Container-Optimized OS. Skoncentrujemy się na konkretnych wyzwaniach konfiguracyjnych, omawiając bezpieczne wystawianie usług przez load balancery z użyciem Identity-Aware Proxy, a także kwestie integracji z Google Cloud Storage (Buckets) oraz Secret Managerem.

Piotr Jakubowski - aktualnie Senior Cloud Engineer w Żabka Future. Swoją technologiczną podróż zaczynał głęboko w terminalu jako Linux Engineer, co zrobiło z niego fanatyka Linuksa, automatyzacji i monitoringu. Ostatnio jego techniczne zainteresowania ewoluowały też w stronę rozwiązań DevOps, które wdraża w środowiskach chmurowych, choć w razie potrzeby chętnie wraca też do środowisk on-premises. Prywatnie pasjonat Smart Home - integruje wszystko, co ma procesor, kibic piłki nożnej oraz miłośnik muzyki rockowej i dobrego kina science-fiction.

Jak zautomatyzować wdrożenie systemu, jeśli do uruchomienia automatyzacji potrzebujesz… działającego systemu? Jak taki proces można ułatwić albo... utrudnić? Prędzej czy później każdy zderza się z tym klasycznym problemem „jajka i kury”. Podczas prelekcji Damian pokaże w praktyce, jak rozwiązać ten paradoks na przykładzie budowania infrastruktury w modelu out-of-the-box deployment przy zachowaniu żelaznej zasady ``automation-first``. Dowiecie się, jak zapanować nad współpracą wielu zespołów we wspólnym repozytorium oraz jak ewoluuje warsztat pracy osoby, która deleguje zadania wirtualnym agentom. Zapraszamy na spacer przez pole minowe, po którym sami ocenicie, czy do zbudowania produktu klasy enterprise nadal wystarczy laptop i czy można się czegoś pożytecznego nauczyć od halucynującego modelu.

Damian Majewski - w branży IT od ponad 15 lat. Przeszedł przez różne stanowiska - od wsparcia użytkowników, przez administrację systemami do inżyniera platformy, by dziś dumnie nosić tytuł specjalisty od spraw nudnych i beznadziejnych. Wyznawca zasady ``automation-first``. Pasjonat zdrowego stylu życia.

Tradycyjnie, po części merytorycznej zapraszamy wszystkich uczestników na gorącą pizzę i dalsze rozmowy w kuluarach. Udział w wydarzeniu jest bezpłatny, dlatego zachęcamy do udziału. Nagrania z poprzednich MeetUpów, a niebawem i z tego, możecie znaleźć w serwisie YouTube.