Senior Data Engineer at 1dea sp. z o.o. · Krakow

Cześć!

Dla naszego klienta z segmentu premium poszukujemy doświadczonego Senior Data Engineera, który wesprze rozwój nowoczesnej platformy danych w środowisku Google Cloud Platform. Osoba na tym stanowisku będzie odpowiedzialna za projektowanie, rozwój i optymalizację procesów przetwarzania danych oraz współtworzenie architektury danych wspierającej raportowanie, analitykę i inicjatywy związane z AI..

Zakres obowiązków

• Projektowanie, rozwój i utrzymanie skalowalnych pipeline'ów danych.
• Tworzenie oraz optymalizacja procesów ETL/ELT.
• Modelowanie danych i rozwój warstwy analitycznej z wykorzystaniem dbt.
• Współtworzenie architektury danych w środowisku Google Cloud Platform.
• Integracja danych z wielu źródeł oraz zapewnienie ich jakości i spójności.
• Współpraca z analitykami, zespołami BI oraz interesariuszami biznesowymi.
• Wsparcie inicjatyw związanych z analityką zaawansowaną i rozwiązaniami AI.
• Identyfikacja oraz wdrażanie usprawnień w obszarze przetwarzania i przechowywania danych.

Wymagania obowiązkowe

• Minimum kilkuletnie doświadczenie na stanowisku Data Engineer lub podobnym.
• Bardzo dobra znajomość Python.
• Bardzo dobra znajomość SQL.
• Praktyczne doświadczenie z dbt.
• Doświadczenie w projektowaniu i rozwijaniu procesów ETL/ELT.
• Znajomość relacyjnych i nierelacyjnych baz danych.
• Doświadczenie w pracy z rozwiązaniami Google Cloud Platform.
• Znajomość zagadnień związanych z hurtowniami danych i modelowaniem danych.
• Komunikatywna znajomość języka angielskiego.

Mile widziane

• Znajomość Go (Golang).
• Doświadczenie z Airflow lub Dagster.
• Doświadczenie z Fivetran lub Airbyte.
• Znajomość Apache Spark, Hadoop, Hive lub pokrewnych technologii Big Data.
• Doświadczenie z Vertex AI lub Dataiku.
• Znajomość Power BI.

Praca głównie zdalna, z dojazdami do Krakowa - 1-2 razy w miesiącu.