Senior Cloud Data Engineer (AWS)

Szukamy Ciebie, jeśli:

• masz min. 5 lat doświadczenia w IT, w tym min. 3,5 roku w komercyjnej pracy z danymi w chmurze AWS (Glue, Athena, DynamoBD),
• masz doświadczenie w pracy z narzędziem Terraform,
• masz doświadczenie w pracy z Databricks,
• masz komercyjne doświadczenie w przetwarzaniu sporych danych przy użyciuJSON,
• znasz i wykorzystujesz Python oraz PySpark,
• korzystasz z SQL na poziomie zaawansowanym i wykorzystujesz go na rozwiązaniach technologicznych MS i nie tylko,
• znasz metodyki i stosujesz biegle Git oraz CI/CD,
• posiadasz doświadczenie z dbt,
• tworzysz i optymalizujesz rozwiązania przetwarzające dane (ETL, ELT, itp.) poprzedzone projektem technicznym oraz alternatywami rozwiązań (np. Apache Airflow)
• masz doświadczenie z praktykami zwinnymi oraz znasz narzędzia wykorzystywane w procesie wytwarzania oprogramowania, w tym np. Azure DevOps,
• masz wiedzę na temat stosowania mechanizmów związanych z bezpiecznym przechowywaniem i przetwarzaniem danych w chmurze,
• świadomie wykorzystujesz Generative AI w procesie wytwarzania oprogramowania oraz w decyzjach architektonicznych i technologicznych,
• posługujesz się j. angielskim na poziomie średniozaawansowanym (min. B2) oraz swobodnie komunikujesz się w języku polskim.

Praca na tym stanowisku w naszej firmie oznacza:

• projektowanie i rozwijanie nowoczesnej platformy danych opartej na Databricks i AWS,
• budowę oraz optymalizację procesów ETL/ELT wykorzystujących PySpark, Spark SQL i dbt,
• implementację architektury lakehouse zgodnie z podejściem medallion (Bronze, Silver, Gold),
• współtworzenie standardów dotyczących Data Engineering, jakości danych i Data Governance,
• wdrażanie oraz rozwój rozwiązań opartych o Unity Catalog,
• projektowanie modeli danych wspierających potrzeby analityczne i raportowe biznesu,
• współpracę z architektami, analitykami i klientem przy definiowaniu kierunku rozwoju platformy,integrację danych z wielu źródeł oraz implementację mechanizmów CDC i near-real-time data processing,
• aktywny udział w przygotowaniu i prezentacji prototypów produktu,
• wpływ na decyzje architektoniczne oraz rozwój strategicznej platformy danych od wczesnych etapów jej powstawania.

Doświadczenie

• 5 lat

Wynagrodzenie_senior

• 133 – 196 zł/h netto + VAT (B2B)

Typ oferty

• Data Solutions

Technologie

• AWS
• Python
• SQL
• Databricks

Co oferujemy, by pracowało Ci się dobrze:

• dużą swobodę działania i realny wpływ na kierunek projektów,
• projekty dla klientów z Europy i USA – branża turystyczna, ubezpieczeniowa, energetyczna, farmaceutyczna i finansowa,
• certyfikacje i szkolenia chmurowe: AWS, Microsoft, Databricks Academy – opłacamy szkolenia i egzaminy,
• narzędzia AI dla każdego w zespole od pierwszego dnia,
• społeczność ekspertów: grupy tematyczne, dostęp do zespołu architektów systemowych, analityków biznesowych i zespołu UX,
• możliwość pracy 100% remote,
• damy Ci merytoryczny feedback po zakończonym procesie rekrutacyjnym – niezależnie od wyniku.
• Więcej o zespole, projektach i technologiach:
• Case study:

Język

• angielski B2+