קצת על התפקיד:
מהנדס.ת נתונים בעל.ת רקע טכני ותשתיתי חזק, האחראי.ת על תכנון, הקמה ותחזוקה של ארכיטקטורת הנתונים בארגון.
התפקיד כולל הבנת צרכי הלקוח ותרגומם לפתרונות נתונים מקצה לקצה, בניית תהליכי ETL/ELT מורכבים, ומימוש מודלים מתקדמים (AI/ML) על גבי פלטפורמת הנתונים הארגונית לצורך הפקת תובנות עסקיות, תוך ניהול המערכת (Docker & Kubernetes) ושימוש בקונטיינרים בסביבת Linux.
במסגרת התפקיד:
- ניתוח דרישות והסקת משמעויות: עבודה צמודה מול לקוחות (פנימיים) להבנת הצרכים העסקיים, אפיון מקורות הנתונים ותרגומם לדרישות טכניות ומבני נתונים אופטימליים.
- תכנון ומימוש תהליכי Data Pipeline: תכנון ופיתוח Pipeline רובסטים, סקלאביליים ויעילים לאיסוף, עיבוד וניקוי נתונים ממקורות מגוונים.
- תשתיות וקונטיינרים: ניהול ופריסת תהליכי נתונים בסביבות Docker ו-Kubernetes, עבודה שוטפת בסיבת Linux (Bash/Shell) והגדרת משאבים וביצועים לקונטיינרים.
- מימוש פתרונות על גבי הפלטפורמה: יישום פתרונות מבוססי נתונים כגון:
- "צ'אט מומחה" (LLM-based),הטמעת תהליכי זיהוי אנומליות, ותיוג אוטומטי של נתונים וכו'
- אופטימיזציה ותחזוקה : שיפור ביצועי שאילתות וניהול מחזור החיים של הנתונים בסביבת Production .
מה אנחנו מחפשים?
- ניסיון מוכח בפיתוח Python ו-SQL ברמה גבוהה
- שליטה במערכות הפעלה Linux (שרתים, סקריפטים)
- ניסיון מעמיק בתכנון ובניית Pipeline של נתונים בסביבות Big Data
- הכרה וניסיון עם כלי תזמון (Orchestration) כגון Airflow, Prefect או דומים
- יכולת עבודה עצמאית מול לקוח וניתוח תהליכים עסקיים מורכבים
- הבנה ב-CI/CD עבור עולמות ה-Data-יתרון
- ניסיון מעשי בעבודה עם Docker ו Kubernetes(פריסת קונטיינרים, ניהול תצורות) -יתרון
- היכרות עם עולמות ה- GenAI עבודה עם (Vector Databases, RAG)-יתרון
- ניסיון במימוש מודלים לזיהוי אנומליות סיווג ותיוג- יתרון
למה כדאי לך להצטרף אלינו?
אם את/ה מחפש/ת אתגר טכנולוגי בסביבה דינמית ומתקדמת, ויש לך את הניסיון והתשוקה ל-AI, אנו מזמינים אותך לשלוח אלינו את קורות החיים שלך.