Databricks vývojár

Vo všeobecnosti

Tento projekt sa zameriava na návrh a implementáciu end-to-end ETL procesu a bezpečnú migráciu dát cez proxy server do SAP prostredia hostovaného v Kanade. Hľadáme skúseného data engineera, ktorý zohrá kľúčovú úlohu pri návrhu integračnej architektúry a implementácii škálovateľných dátových pipeline s využitím Snowflake a Databricks.

Misia

• Návrh a implementácia end-to-end ETL procesov.
• Migrácia dát cez zabezpečenú proxy infraštruktúru do SAP prostredia v Kanade.
• Vývoj a orchestrácia dátových pipeline v Databricks a Snowflake.
• Programovanie transformačnej logiky v Pythone.
• Implementácia kontrol kvality dát, validácií a sanity checkov.
• Logovanie, monitoring a auditovateľnosť dátových prenosov.
• Optimalizácia výkonu.

Zručnosti

• Minimálne 2 roky skúseností s Databricks.
• Preukázateľné skúsenosti s návrhom a vývojom ETL pipeline.
• Pokročilé znalosti Databricks a praktické skúsenosti so Snowflake.
• Pokročilý Python a CI/CD.
• Skúsenosti s migráciou dát do SAP alebo integráciou enterprise systémov.
• Znalosť bezpečnostných princípov pri prenose dát.
• Dôraz na kvalitu dát, auditovateľnosť a stabilnú produkčnú prevádzku.
• Skúsenosti s komplexnými ETL pipeline a optimalizáciou dotazov z hľadiska výkonu a nákladov.
• Skúsenosti s čítaním Delta Share tabuliek.
• Skúsenosti s Enterprise GitHub Actions a JFrog.

Benefity

• Skvelý tím a flexibilný pracovný čas.
• Kariérny koučing a osobný rozvoj.
• Technické školenia a workshopy.
• Pracovné vybavenie, Mac alebo Windows.
• Firemné akcie a oslavy.
• Firemný psychológ pre psychickú pohodu.
• Multisport karta.