Databricks vývojár

Vo všeobecnosti

Tento projekt sa zameriava na návrh a implementáciu end-to-end ETL procesu a bezpečnú migráciu dát cez proxy server do SAP prostredia hostovaného v Kanade. Hľadáme skúseného data engineera, ktorý zohrá kľúčovú úlohu pri návrhu integračnej architektúry a implementácii škálovateľných dátových pipeline s využitím Snowflake a Databricks.

Misia

• Návrh a implementácia end-to-end ETL procesov
• Migrácia dát cez zabezpečenú proxy infraštruktúru do SAP prostredia v Kanade
• Vývoj a orchestrácia dátových pipeline v Databricks a Snowflake
• Programovanie transformačnej logiky v Pythone
• Implementácia kontrol kvality dát, validácií a sanity checkov
• Logovanie, monitoring a auditovateľnosť dátových prenosov
• Optimalizácia výkonu

Zručnosti

• Minimálne 2 roky skúseností s Databricks
• Preukázateľné skúsenosti s návrhom a vývojom ETL pipeline
• Pokročilé znalosti Databricks a praktické skúsenosti so Snowflake
• Pokročilý Python a CI/CD
• Skúsenosti s migráciou dát do SAP alebo integráciou enterprise systémov
• Znalosť bezpečnostných princípov pri prenose dát
• Dôraz na kvalitu dát, auditovateľnosť a stabilnú produkčnú prevádzku
• Skúsenosti s komplexnými ETL pipeline a optimalizáciou dotazov z hľadiska výkonu a nákladov
• Skúsenosti s čítaním Delta Share tabuliek
• Skúsenosti s Enterprise GitHub Actions a JFrog

Benefity

• Skvelý tím a flexibilný pracovný čas
• Kariérny koučing a osobný rozvoj
• Technické školenia a workshopy
• Pracovné vybavenie, Mac alebo Windows
• Firemné akcie a oslavy
• Firemný psychológ pre psychickú pohodu
• Multisport karta