Data Engineer - Modern Stack
Budowanie hurtowni i lakehouse na Snowflake i Microsoft Fabric. Modern data stack pod warstwę AI.
- Zespół
- Custom Development i Dane
- Poziom
- Mid / Senior
- Lokalizacja
- Warszawa lub zdalnie z PL
- Forma współpracy
- B2B lub umowa o pracę
SnowflakeMicrosoft FabricdbtPythonSnowpark
Zakres obowiązków
- Projektowanie i budowa hurtowni danych oraz lakehouse na Snowflake i Microsoft Fabric
- Modelowanie danych (dbt, Kimball, Data Vault 2.0), lineage i dokumentacja
- Integracje danych z SAP (OData, BAPI, CPI), M365, systemami SaaS i on-premise
- Przygotowanie danych pod warstwę AI i RAG (klasyfikacja, chunking, embedding)
- Implementacja polityk data governance: Microsoft Purview, Snowflake Horizon
- Budowanie i utrzymanie pipeline'ów ELT (Azure Data Factory, dbt, Snowpipe)
- Współpraca z klientem przy audycie jakości danych i planowaniu SNOK MDM
Wymagania
- Min. 3 lata doświadczenia w data engineering lub analytics engineering
- Praktyczna znajomość Snowflake lub Microsoft Fabric w środowisku produkcyjnym
- Biegłość w SQL i Python (pandas, PySpark mile widziane)
- Doświadczenie z dbt (Core lub Cloud) i modelowaniem danych
- Znajomość wzorców integracji danych: batch, streaming, CDC
- Umiejętność pracy z Git, podstawy CI/CD dla pipeline'ów
Mile widziane
- Znajomość SAP i jego modelu danych (tabele EKKO, BKPF, PA/HR)
- Doświadczenie z Databricks (Delta Lake, Unity Catalog, MLflow)
- Znajomość BigQuery i ekosystemu Google Cloud
- Certyfikaty Snowflake (SnowPro Core / Advanced) lub Microsoft Fabric
- Doświadczenie z Master Data Management lub jakością danych
Co oferujemy
- Praca przy SNOK MDM - własnym produkcie SNOK w produkcji u klientów enterprise
- Wynagrodzenie B2B 16 000 - 26 000 PLN netto lub UoP adekwatnie
- Dostęp do środowisk Snowflake, Microsoft Fabric i Databricks z pierwszego dnia
- Budżet na certyfikaty i udział w konferencjach (Snowflake Summit, dbt Coalesce)
- Projekty z sektora regulowanego - banki, ubezpieczenia, produkcja, ochrona zdrowia
- Możliwość rozszerzenia w kierunku AI/ML stack - LLM na danych klienta