תכנון, פיתוח ותחזוקה של תהליכי ETL /ELT בהיקפים גדולים עבור נתוני חיישנים, וידאו ותמונות
פיתוח ואופטימיזציה של תהליכי עיבוד נתונים עבור מידע מובנה ולא-מובנה
תחזוקה ושדרוג של מסדי נתונים, data Lakes ומערכות אחסון
הבטחת איכות, אמינות וביצועי הנתונים לאורך כלל צנרת הדאטה
עבודה צמודה עם צוותי אלגוריתמאים, בינה מלאכותית, תוכנה והנדסת מערכת
תמיכה בתהליכי דאטה סיינס ולמידת מכונה כולל הכנת דאטה וחילוץ פיצ'רים
הובלת הכנסת טכנולוגיות חדשות, כלי דאטה וסטנדרטים מתקדמים
איתור ופתרון תקלות בסביבות עיבוד ואחסון
לקיחת Ownership מלאה על מערכות הדאטה והובלת שיפורים
דרישות:
תואר ראשון/שני במדעי המחשב, הנדסת מערכות מידע, הנדסת חשמל או תחום רלוונטי
ניסיון של 3+ שנים כ data Engineer בסביבות עתירות דאטה
ניסיון משמעותי בפיתוח תהליכי ETL
שליטה ב Python
ניסיון מעשי ב Apache Airflow או כלי Orchestration מקבילים
ניסיון עם מסדי נתונים SQL ו NoSQL
היכרות עם מסגרות עיבוד דאטה ושיטות עבודה יעילות
ניסיון בעבודה בסביבות Linux ותחזוקת שרתים
ניסיון בתמיכה ב data Science / Machine Learning - יתרון
חשיבה מערכתית, יכולות פתרון בעיות ויכולת עבודה עצמאית בצוות רבתחומי המשרה מיועדת לנשים ולגברים כאחד.
