תיאור:

- בניית פייפליין של נתונים הכולל עיבוד, סטנדרטיזציה של נתונים בסקלה והכנת הנתונים לאימון מודלים

-ETL יצירת תהליכי אוטומציה לתהליכי

- AWSאחריות על תשתיות הנתונים ומאגרי הנתונים ב

- ביצוע ריפקטורינג לשאילתות SQL , הטמעת שיטות חדשות לעיבוד נתונים ואוטומציה של משימות בAWS

- פיתוח פתרונות מעקב וניטור אפקטיביים

דרישות:

- תואר ראשון במדעי המחשב\מערכות מידע\הנדסת תוכנה\ תעשייה וניהול

- ניסיון של שנתיים לפחות בפיתוח מודלי נתונים ועבודה עם טכנולוגיות לעיבוד והמרת נתונים כמו Apache Airflow., Feature store

- ניסיון בפיתוח פייפליין של נתונים המעבדים כמויות גדולות של נתונים מובנים ולא מובנים

- ניסיון בהטמעת פתרונות מעקב ובדיקה אפקטיביים

- היכרות וידע רחב ב AWS כולל S3, LAMBDA, RDS, SageMaker, Athena, Glue.