Senior Data Engineer

Technologie, których używamy

Twój zakres obowiązków

• Projektowanie, development oraz rozwijanie architektury Data Lakehouse opartej na ekosystemie GCP - od surowych danych do gotowych modeli analitycznych (architektura bronze -> silver -> gold).
• Dobór i integracja usług w środowisku GCP takich jak Airbyte, GCS, DataForm, BigQuery, Composer (Airflow), Cloud Run (Functions), PubSub, Looker Studio, GitLab, ClickHouse i inne.
• Dobór najlepszych narzędzi i wdrażanie mechanizmów data quality, walidacji i monitoringu jakości danych.
• Optymalizacja kosztów platformy, dobór modeli rozliczeniowych monitorowanie budżetów.
• Analiza danych oraz optymalizacja zapytań SQL.
• Kierowanie niewielkim zespołem Data Engineerów oraz współpraca z zespołem Analityków.
• Mentoring członków zespołu, code review, prowadzenie sesji knowledge-sharing i tworzenie dokumentacji architektonicznej.

Nasze wymagania

• Praktyczne doświadczenie w projektowaniu i wdrażaniu platform danych w architekturze Data Lakehouse lub podobnej.
• Bardzo dobra znajomość SQL (w tym BigQuery).
• Praktyczna znajomość Google Cloud Platform oraz doboru narzędzi na poszczególnych etapach przetwarzania danych.
• Praktyka w zarządzaniu jakością danych.
• Umiejętność podejmowania decyzji architektonicznych z uwzględnieniem trade-offów.
• Proaktywne podejście do identyfikacji i rozwiązywania problemów.
• Znajomość co najmniej jednego języka programowania: Python, R, pokrewne

Mile widziane

• Doświadczenie w pracy z ClickHouse.

To oferujemy

• Praca hybrydowa, biuro w Warszawie (ul. Domaniewska 49)
• Stabilne zatrudnienie w firmie, która rośnie i realnie inwestuje w technologie.
• Nowoczesne narzędzia pracy i środowiska projektowe.
• Roczny budżet szkoleniowy na rozwój.
• Kafeteria benefitowa NAIS - wybierasz benefity dopasowane do siebie.

Benefity