Cloud Data Architect

Cloud Data Architect

Devire

Hexjobs Insights

Stanowisko: Cloud Data Architect. Odpowiedzialność: migracja danych do Databricks, projektowanie pipeline'ów i architektury. Wymagana znajomość Databricks, Snowflake, AWS, SQL.

Schlüsselwörter

Databricks
Snowflake
Delta Lake
AWS
S3
SQL
Parquet
Data Lake
pipeline'y danych
migracja danych

Vorteile

  • Wynagrodzenie w oparciu o umowę B2B (200-220zł/h netto)
  • Współpraca 100% zdalna
  • Pakiet benefitów (opieka medyczna, członkostwo sportowe)
  • Długoterminowa współpraca

Co oferujemy

  • Wynagrodzenie w oparciu o umowę B2B (via Devire) - 200-220zł/h netto.
  • Współpraca 100% zdalna.
  • Pakiet benefitów (opieka medyczna, członkostwo sportowe itp.).
  • Długoterminowa współpraca.

Wymagania

  • Ekspercka znajomość Databricks.
  • Zaawansowane, praktyczne doświadczenie w pracy z Snowflake.
  • Doświadczenie z Delta Lake – wdrażanie, optymalizacja oraz wykorzystanie na dużą skalę.
  • Praktyka w projektowaniu i utrzymaniu pipeline’ów danych w środowisku AWS (w tym S3).
  • Znajomość formatów Parquet oraz architektur Data Lake.
  • Zaawansowane umiejętności SQL, w tym optymalizacja zapytań.
  • Silne doświadczenie w realizacji migracji danych na dużą skalę.
  • Doświadczenie w projektowaniu architektury danych.
  • Doświadczenie w realizacji projektów end-to-end w środowiskach danych na dużą skalę.
  • Umiejętność prowadzenia dyskusji architektonicznych (challenge, validate, co-create)
  • Wysoka samodzielność oraz gotowość do natychmiastowego rozpoczęcia współpracy.
  • Znajomość języka angielskiego na poziomie min. B2+.

Mile widziane:

  • Doświadczenie w integracjach z systemami takimi jak: HubSpot, Jira, systemy księgowe.
  • Znajomość Power BI w zakresie modelowania danych na potrzeby raportowania.

Obowiązki

  • Zapewnienie technicznego przywództwa w migracji wielopetabajtowych zbiorów danych do Databricks na AWS.
  • Projektowanie oraz nadzór nad wdrożeniem formatu Delta Lake z obsługą Delta Sharing.
  • Przegląd i kwestionowanie strategii oraz roadmapy klienta, wraz z rekomendowaniem usprawnień.
  • Projektowanie pipeline’ów przetwarzania danych oraz logiki konwersji z Parquet / Snowflake do Delta Lake.
  • Wsparcie merytoryczne i mentoring dla wewnętrznych Data Engineerów.
  • Współtworzenie architektury Modern Data Warehouse oraz Data Lakehouse (Delta Lake).
  • Wsparcie inicjatywy raportowej poprzez zapewnienie wysokiej jakości danych dla zespołu Power BI.
Aufrufe: 14
Veröffentlichtvor 27 Tagen
Läuft abin 3 Tagen

Ähnliche Jobs, die für Sie von Interesse sein könnten

Basierend auf "Cloud Data Architect"

Keine Angebote gefunden, versuchen Sie, Ihre Suchkriterien zu ändern.