Senior Cloud Data Engineer (AWS GCP Databricks)
Future Processing · Gliwice, Silesia, PL
Klientem jest międzynarodowa organizacja z sektora medialno‑broadcastingowego, realizująca projekty związane z przetwarzaniem, integracją i jakością danych n...
Job description
Klientem jest międzynarodowa organizacja z sektora medialno‑broadcastingowego, realizująca projekty związane z przetwarzaniem, integracją i jakością danych na dużą skalę. Firma działa w środowisku chmurowym, wykorzystując nowoczesne technologie data engineeringowe do budowy i utrzymania platform analitycznych wspierających kluczowe procesy biznesowe. Szukamy Ciebie, jeśli: - masz min. 5 lat doświadczenia w IT, w tym min. 3,5 roku w pracy z danymi w chmurze AWS (potwierdzone projektami komercyjnymi wdrożonymi na produkcje), - masz doświadczenie komercyjne w pracy z GCP oraz BigQuery i Dataproc , - masz doświadczenie w pracy z Databricks , - posiadasz komercyjne doświadczenie z PySpark, - masz doświadczenie w pracy z Terraform, - korzystasz z SQL na poziomie zaawansowanym i wykorzystujesz go na rozwiązaniach technologicznych MS i nie tylko, - znasz metodyki i stosujesz biegle Git oraz CI/CD, - tworzysz i optymalizujesz rozwiązania przetwarzające dane (ETL, ELT, itp.) poprzedzone projektem technicznym oraz alternatywami rozwiązań (np. Apache Airflow) - potrafisz programować w Python i korzystasz z bibliotek Pandas i/lub NumPy, - masz doświadczenie z praktykami zwinnymi oraz znasz narz...