ארגון ציבורי באזור ירושלים מגייס data Engineer
התפקיד כולל: עבודה עם data Lake ארגוני רחב היקף בסביבת Cloudera, תכנון ופיתוח ארכיטקטורות נתונים, בניית תהליכי ETL /ELT ו-Pipelines לעיבוד נתונים בנפחים גבוהים, עבודה בסביבה מבוזרת, תמיכה בתשתיות data מתקדמות עבור פתרונות AI ו-ML, שיתוף פעולה עם צוותי דאטה, פיתוח ותשתיות והובלת משימות מקצה לקצה ועוד.
דרישות:
- 5 שנות ניסיון כ- data Engineer או בתפקידי Big Data
- ניסיון בעבודה עם Apache Ecosystem ובפרט Spark, Hive ו-Impala
- ניסיון בפיתוח תהליכי ETL /ELT באמצעות Python, Scala או JAVA
- ניסיון בכתיבת שאילתות SQL מורכבות ואופטימיזציית ביצועים
- ניסיון בעבודה עם ארכיטקטורות נתונים מבוזרות, מידול נתונים ותכנון data Lake המשרה מיועדת לנשים ולגברים כאחד.