אם את/ה חי/ה ונושם/ת data Engineering, אוהב/ת לבנות תהליכים מורכבים, לעבוד עם טכנולוגיות ענן מתקדמות ולהפוך מידע גולמי לתשתית חכמה שמניעה ארגונים קדימה - מקומך איתנו!
מה מחכה לך בתפקיד?
פיתוח והקמה של תהליכי ETL /ELT מורכבים בסביבת AWS.
בניית data Pipelines יציבים, סקיילביליים ויעילים מקצה לקצה.
אינטגרציה וקליטת נתונים ממגוון מקורות: APIs, Web Scraping, קבצי CSV/JSON/Text ומערכות תפעוליות.
עיבוד, ניקוי והעשרת נתונים תוך יישום לוגיקות עסקיות מורכבות.
עבודה עם מחסני נתונים ( DWH ) וארכיטקטורות data Lake מתקדמות.
אופטימיזציה של בסיסי נתונים ושיפור ביצועים.
דרישות
לפחות 3 שנות ניסיון כ- data Engineer.
ניסיון מעשי משמעותי בפיתוח תהליכי ETL /ELT - חובה.
ניסיון מוכח עם AWS Glue וכתיבה ב- Python / PySpark / Spark - חובה.
שליטה גבוהה ב-SQL ויכולת אופטימיזציה של שאילתות מורכבות.
ניסיון בעבודה עם מקורות מידע מגוונים ופורמטים שונים (CSV, JSON, APIs וכו').
הבנה מעמיקה ב- data Modeling, DWH ו- data Lake.
יתרון לבעלי רקע בעולמות DevOps, CI/CD ותהליכי אוטומציה. המשרה מיועדת לנשים ולגברים כאחד.