Data Engineer

אנחנו מגייסים Data Engineer להצטרפות ליחידה טכנולוגית בארגון ביטחוני מוביל! התפקיד כולל תכנון, פיתוח ותחזוקה של תשתיות נתונים סקיילביליות בסביבת Cloudera On-Premise, בניית תהליכי קליטה ועיבוד (Pipelines) בנפחים גבוהים, והנחת התשתית ליישומי אנליטיקה מתקדמים ומודלי AI.

לפחות 4 שנות ניסיון טכנולוגי כולל, מתוכן לפחות 3 שנות ניסיון מעשי כ-Data Engineer או בפיתוח Big Data. ניסיון מוכח בכלי פיתוח מבית Apache Ecosystem (בדגש על Spark, Hive, Impala). שליטה גבוהה בפיתוח קוד ותהליכי נתונים באחת מהשפות: Python, Scala, או Java. מומחיות בכתיבת שאילתות SQL אנליטיות מורכבות ואופטימיזציה בסביבות מבוזרות. הבנה מעמיקה בארכיטקטורת נתונים מבוזרת (Distributed Systems) ומידול נתונים.

יתרונות משמעותיים: ניסיון עם כלי אורקסטרציה כגון Apache Airflow. ניסיון בעיבוד נתונים בזרימה (Streaming) מבוססי Apache Kafka. ניסיון בהכנת תשתיות נתונים לפרויקטי ML/AI. היכרות עם סביבות ענן (GCP) או תצורת Hybrid.