Data Engineer

מצטרפים אלינו? אנחנו מחפשים Data Engineer מוכשר/ת להשתלבות בצוות מוביל ולעבודה על פרויקטים חדשניים בתחום AI.

מה בתפקיד? אחריות על קליטה ועיבוד של כמויות גדולות של נתונים ממקורות שונים ביצוע אנליזה והבנה מעמיקה של נתונים עבודה שוטפת ושיתוף פעולה הדוק עם צוות Data Science עיצוב, פיתוח ותחזוקה של תהליכי דאטה קריטיים, מורכבים וסקיילביליים עבודה בסביבות ענן לצד סביבות On-Prem

דרישות המשרה- • ניסיון של לפחות 3 שנים כ Data engineer - חובה • ניסיון של 3 שנים של עבודה עם שפות Object-Oriented Programming (OOP) • ניסיון של 3 שנים עם Python - חובה • ניסיון מעשי עם Spark עבור Large scale data - חובה • ניסיון מעשי של שנתיים לפחות ב AWS עם services של Athena/Glue/StepFunction/EMR/Redshift/RDS – יתרון משמעותי • הבנה עמוקה בתחום של עיצוב, פיתוח ואופטימיזציה של פתרונות מורכבים שמעבירים או מעבדים כמויות גדולות של נתונים • הבנות של טכניקות של אופטימיזציה ועבודה עם partitions של סוגים שונים של דאטה כמו parquet, Avro, hdf5, delta lake • ניסיון בתפיסה ועבודה עם docker, Linux, CI/CD tools, Kubernetes • ניסיון של כלי data pipelines כמו airflow, Kubeflow • תואר במדעי המחשב. הנדסה .מתמטיקה או סטטיסטיקה - חובה • הבנה של מושגים ותהליכים בתחום machine learning • הכרות עם פתרונות GenAI / prompt engineering – יתרון