Data Engineer with GCP (f/m/x)

Dołącz do międzynarodowego projektu realizowanego w obszarze platform danych i rozwiązań AI, którego celem jest migracja środowiska danych z infrastruktury on-premise do Google Cloud Platform. Projekt obejmuje transformację istniejącej platformy opartej o technologie Hadoop do nowoczesnej, chmurowej architektury danych.Twoje zadaniaUdział w migracji platformy danych z środowiska on-premise do Google Cloud PlatformAnaliza istniejących rozwiązań legacy oraz rekomendowanie docelowej architektury danych w chmurzeProjektowanie i implementacja pipeline’ów danych (batch i streaming) w środowisku produkcyjnymPraca z usługami GCP, w szczególności Dataproc, Dataflow, BigQuery, Cloud ComposerAutomatyzacja procesów przetwarzania danych oraz orkiestracja workflowWspółpraca z zespołami międzynarodowymi oraz zewnętrznym partnerem technologicznymUdział w warsztatach technicznych, przeglądach architektury i pracach koncepcyjnychZapewnienie skalowalności, bezpieczeństwa oraz efektywności kosztowej rozwiązańWymaganiaMinimum 5 lat komercyjnego doświadczenia na stanowisku Data Engineer lub podobnymBardzo dobra znajomość Google Cloud Platform, w szczególności Dataproc, Dataflow, BigQuery oraz Cloud ComposerWcześniejsza praca w projektach migracyjnychDoskonała znajomość Python - ETL, pipeline’y danych, automatyzacjaDobra znajomość Java, szczególnie w kontekście przetwarzania danych - Spark, Beam, batch/streamingDoświadczenie w projektowaniu i realizacji złożonych pipeline’ów danych w środowiskach produkcyjnychPraktyczna znajomość narzędzi orkiestracji, automatyzacji i CI/CD (np. Airflow, Git, Terraform)Umiejętność architektowania rozwiązań danych w GCP z uwzględnieniem bezpieczeństwa, data governance i kontroli dostępuBardzo dobra znajomość języka angielskiegoSamodzielność w podejmowaniu decyzji technicznych oraz umiejętność pracy zespołowejWymagane przebywanie na terenie Polski oraz płynna znajomość języka polskiegoMile widzianeDoświadczenie w pracy z Cloudera lub podobnymi platformami HadoopBenefity, które czekają na Ciebie:Tytuł Great Place to Work od 2015 roku - to dzięki opiniom pracowników otrzymujemy tytuł i wdrażamy nowe pomysłyStabilność zatrudnienia - 2,1 MLD PLN przychodu, brak długów, od 2006 roku na rynkuDzielimy się zyskiem z pracownikami - od 2022 roku przeznaczyliśmy na ten cel już ponad 76 milionów PLNBogaty pakiet benefitów - prywatna opieka zdrowotna, platforma kafeteryjna, zniżki na samochody i więcejKomfortowe miejsce pracy - pracuj w naszych biurach klasy A lub zdalnieDziesiątki fascynujących projektów dla prestiżowych marek z całego świata1 000 000 PLN rocznie na Twoje pomysły - taką kwotą wspieramy pasje i akcje wolontariackie naszych pracownikówStawiamy na Twój rozwój - meetupy, webinary, platforma szkoleniowa i blog technologiczny – Ty wybieraszFantastyczna atmosfera stworzona przez wszystkich Sii Power PeopleDołącz do zespołu Sii – rozwijaj umiejętności, zdobywaj doświadczenie i buduj karierę!