תאור התפקיד:
- תכנון ופיתוח תהליכי ETL ובניית Data Pipelines בסביבת Lakehouse
- התוויית דרכי מידול ובחירת כלי ואופן הפיתוח בהתאם לסביבת עבודה, נפח המידע, מקורות נתונים ודרישה עסקית
- התפקיד כולל תכנון, פיתוח וניהול תהליכי אינטגרציה ובניית Data Pipelines מורכבים
- הכנת נתונים, מידול, טיוב והעשרה של הנתונים
- הגדרה וביצוע תהליכי גישה, הפקה, זרימה, תכלול וקליטה בין מקורות נתונים ופלטפורמות אנליטיות, מתן הדרכה והנחיה למפתחים ומהנדסי נתונים בארגון
- הובלה ותכנון תהליכי BATCH ו STREAMING, תכנון ובניית שכבות נתונים ב Data Modeling ו- Lakehouse
- עבודה בשיתוף פעולה עם DBA, צוותי תשתיות של הארגון, אנשי DATA ומדעני נתונים
- לקיחת חלק בתכנון תהליכי מעבר נתונים לסביבת ענן
- עבודה עם כלים וטכנולוגיות מתקדמות בתחום ה- BI ,AI ,Data Big, והטמעה של טכנולוגיות חדשות
- השכלה: תואר שני ומעלה בהנדסה/מדעי המחשב/סטטיסטיקה/חקר ביצועים או תור שלישי כלשהו ובתנאי שבעל/ת 7 שנות ניסיון ומעלה
- לפחות 5 שנים ניסיון כמהנדס/ת נתונים - חובה
- תואר שני בתחום ההנדסה - חובה
- ניסיון מוכח במידול נתונים - חובה
- ניסיון בתכנון ובניית Data Pipelines מורכבים - חובה
- ניסיון בעבודה עם כלים אנליטיים: BI ,ETL - חובה
- שליטה בשפת SQL ברמה גבוהה - חובה
- שליטה בשפת JAVA/R/Python ברמה גבוהה – חובה