Náplň práce:
• Databricks Architektura a engineering patterns
• Praktické rady, jak strukturovat úlohy, delivery patterns,
standardy a opakovaně použitelné technické přístupy v Databricks.
• Governance a data management lifecycle
• Správa metadat, nastavení katalogu Unity, nativní možnosti
• Přístup ke kvalitě dat/DQMS
• Airflow a orchestrace a jak ho použít s úlohami Databricks
• Nastavení DevOps
• Podpora při definování praktických přístupů z hlediska CI/CD
• Podpora při definování základních standardů, jako jsou konvence pojmenování,
principy nasazení a vybrané zásady správy a řízení.
Požadované zkušenosti:
• Silné praktické zkušenosti s Databricks v reálných prostředích
• Praktické zkušenosti s orchestrací Airflow v kombinaci s Databricks
• Solidní zkušenosti s CI/CD pro Databricks, včetně vývoje založeného na Gitu,
testování, automatizace nasazení a provozu
• Zkušenosti s frameworky pro kvalitu dat / monitorování /
DQ, ideálně v Databricks nebo podobných moderních datových platformách.
• Schopnost poskytovat praktická doporučení, alternativy
