מומחה/ית Databricks
תיאור המשרה
מחפש/ת אתגר טכנולוגי משמעותי בעולמות הדאטה? הצטרף/י להובלת פרויקטי Data מורכבים על גבי Databricks, בסביבה טכנולוגית מתקדמת עם השפעה אמיתית על תשתיות ופתרונות הדאטה של הארגון
אנחנו מחפשים מומחה/ית Databricks עם ניסיון מעשי ומשמעותי בהובלת ופיתוח פרויקטי Data על גבי פלטפורמת Databricks. התפקיד כולל עבודה על פתרונות Data מורכבים מקצה לקצה, החל מתכנון הארכיטקטורה, דרך פיתוח תהליכי Data Engineering ועיבוד נתונים בהיקפים גדולים, ועד להטמעה בסביבת Production. תכנון, פיתוח והטמעה של פתרונות Data מתקדמים על גבי Databricks. הובלת פרויקטים משמעותיים בתחום ה-Data, משלב האפיון ועד Production. פיתוח תהליכי Data איכותיים, scalable ויעילים. עבודה עם מקורות מידע ומערכות ארגוניות מגוונות ואינטגרציה ביניהן. אופטימיזציה של ביצועים, עלויות ותהליכי עיבוד. עבודה בסביבת Cloud ובשיתוף פעולה עם צוותי Data, DevOps, BI וארכיטקטורה. תמיכה בהגדרת Best Practices, סטנדרטים וארכיטקטורת Data ארגונית.
דרישות התפקיד
5 שנים ניסיון משמעותי ומוכח בפרויקטי Databricks – חובה. 5 שנים ניסיון כ Data Engineer ניסיון משמעותי ב-Python. ניסיון מעשי בפיתוח על גבי Databricks בסביבת Production. ניסיון משמעותי עם Apache Spark / PySpark. ניסיון בפיתוח תהליכי ETL/ELT ו-Data Pipelines. ניסיון עם Delta Lake ו-Lakehouse. שליטה גבוהה ב-SQL. ניסיון בעבודה בסביבת ענן Azure / AWS / GCP. ניסיון בעבודה עם מערכות Data בהיקפים גדולים. יכולת פתרון בעיות, ראייה מערכתית ויכולת עבודה עצמאית.