דרושים » ניהול ביניים » data Engineer

דרישות:
5 שנות ניסיון ומעלה בתפקידי דאטה, מתוכן שנתיים לפחות ב- data science
מדע נתונים ( data Science):
הבנה עמוקה במודלים של למידת מכונה, כולל AutoML.
ניסיון בהנדסת Context ועיבוד נתונים ב-Large Scale.
פיתוח תוכנה :
שליטה מעשית ב- Python (כתיבת קוד מודולרי, OOP ולא רק ב-Jupyter Notebook).
הבנה ב- DevOps ועבודה על פי עקרונות של קוד נקי, מבוסס גרסאות ובדיקות אוטומטיות.
עבודת צוות ותקשורת:
יכולת תקשורת בין-אישית גבוהה והסבר ברור של שיקולים מקצועיים.
נכונות לעבוד בשיתוף פעולה הדוק עם אנליסטים, מפתחים ובעלי עניין שונים.
יכולת להתמודד בכבוד עם דעות מנוגדות, להתווכח בצורה בונה ולקבל ביקורת מקצועית.
MLOps: ניסיון עם כלי MLOps כמו MLflow ו- data Pipelines כמו Airflow.
פיתוח תוכנה : הבנה בארכיטקטורת תוכנה. המשרה מיועדת לנשים ולגברים כאחד.

דרישות:
*לפחות 3 שנות ניסיון כData Engineer
*לפחות 3 שנות ניסיון בשפות תכנות מונחות עצמים (OOP)
*לפחות 3 שנות ניסיון עם Python
*ניסיון מעשי עם Spark לעבודה עם נתונים בהיקפים גדולים
*ניסיון עם Docker, Linux, Kubernetes וכלי CI/CD
*ניסיון עם כלי data Pipelines כגון Airflow או Kubeflow
*תואר ראשון במדעי המחשב / הנדסה / מתמטיקה / סטטיסטיקה
*הבנה של עקרונות Machine Learning
*ניסיון בעיצוב, פיתוח ואופטימיזציה של תהליכים להעברת ועיבוד נתונים בהיקפים גדולים
*היכרות עם פורמטים וטכניקות partitions: Parquet, Avro, HDF5, Delta Lake

יתרונות:
*לפחות שנתיים ניסיון עם AWS כולל Athena, Glue, StepFunction, EMR, Redshift, RDS
*היכרות עם פתרונות GenAI וPrompt Engineering המשרה מיועדת לנשים ולגברים כאחד.

דרישות:
ניסיון של לפחות 3 שנים כ data engineer - חובה
ניסיון של 3 שנים עם Python בדגש על עבודה עם קבצי json  ועבודה מול בסיסי נתונים חובה
ניסיון מעשי של שנתיים לפחות ב AWS חובה
עבודה מול קבצי טקסט למטרות AI ו LLM יתרון משמעותי
ניסיון מעשי עם Spark עבור Large scale data -יתרון משמעותי
הבנות של טכניקות של אופטימיזציה ועבודה עם partitions של סוגים שונים של דאטה כמו parquet, Avro, hdfs, delta lake
ניסיון בתפיסה ועבודה עם docker, Linux, CI/CD tools, Kubernetes
הכרות עם פתרונות GenAI / prompt engineering יתרון משמעותי המשרה מיועדת לנשים ולגברים כאחד.

דרישות:
ניסיון של 7+ שנים בתחום הדאטה, מתוכן 3+ שנים ב- data Science
ניסיון ושליטה ב- Python ו-SQL
ניסיון מוכח בבניית מודלים ויישומם בסביבות ייצור
היכרות עם Big Data, ענן וטכנולוגיות מתקדמות
יכולת הובלה עצמאית של פרויקטי data End-to-End
ניסיון עם מסדי נתונים רלציוניים/לא-רלציוניים
היכרות עם תהליכי DQA
שליטה בכלי ויזואליזציה ודיווח
רקע בפיננסים/ממשל
תואר שני ומעלה בתחומים רלוונטיים (מדעי המחשב, סטטיסטיקה, חקר ביצועים, מתמטיקה, הנדסה ) או תואר שלישי + ניסיון רלוונטי של 9 שנים ומעלה המשרה מיועדת לנשים ולגברים כאחד.

דרישות:
4 שנות ניסיון ומעלה
ניסיון מעשי בתכנון, פיתוח ותחזוקה של תהליכי ETL.
הבנה של מודלי נתונים ( data Modeling) ועקרונות של data Warehouse
ניתוח המידע,חקירת נתונים והבנת הקשיים המרכזיים בתחום המידע
ניסיון רב ב SQL וכתיבת שאילתות מורכבות, פרודצורות, פונקציות
ניסיון בפיתוח קוד אופטימלי ותשתית סקלבילית בהתמודדות עם נפחי מידע גדולים
ניסיון מעשי בפיתוח כלי BI לאחזור נתונים ובניית דוחות, דשבורדים, כדוגמת BO /QLIK/ SAC - יתרון
ניסיון והיכרות עם תכנון ארכיטקטורת מידע ומחסן נתונים בסביבות של columnar db, in memory db - יתרון
ניסיון בפיתוח ETL מבוסס log-based CDC יתרון
ניסיון בפיתוח תהליכי ETL באינפורמטיקה יתרון
נסיון בפיתוח על גבי HANA DB,אדמיניסטרציה דרך SAP HANA Cockpit - יתרון
ניסיון בפיתוח בסביבת VS Code - יתרון
ניסיון ב CI/CD, עם כלים כמו Jenkins,GitHub, GitLab - יתרון
נסיון בעבודה בסביבת ענן - יתרון
הקמת תשתיות pipline להעברת מידע ממערכות שונות יתרון המשרה מיועדת לנשים ולגברים כאחד.

דרישות:
ניסיון מוכח בהטמעת ופריסת מודלי AI לסביבות ייצור (torchserve, NVIDIA Triton)
שליטה גבוהה בPython וכתיבת קוד Production (כולל שימוש בPydantic)
ניסיון בעבודה בסביבת GCP (Artifact Registry, Cloud Run Jobs, Workflows, GKE)
ניסיון בפיתוח סוכני AI Generative (RAG, Google A2A, ADK, MSP, Function Calling)
ידע וניסיון בתהליכי DevOps (Docker, CI/CD) המשרה מיועדת לנשים ולגברים כאחד.

דרישות:
לפחות 3 שנות ניסיון עם Splunk
ידע חזק בSPL - לוחות בקרה, מאקרו, ביצועים
ניסיון עם מערכות מבוססות אירועים (Kafka, REST APIs)
שליטה בJSON, XML ונתונים חצי-מובנים
סקריפטינג בPython או Bash
יכולת עבודה עצמאית והובלת פתרונות ברמת פרודקשן המשרה מיועדת לנשים ולגברים כאחד.

דרישות:
פיתוח תהליכי ETL מקצה לקצה, בעיקר ב-SSIS
עבודה שוטפת מול בסיסי נתונים מגוונים
תמיכה ובניית דוחות ודשבורדים בPower BI / SSRS
שילוב בעבודה עם שירותים אנליטיים בענן Redshift, Aurora, QuickSight המשרה מיועדת לנשים ולגברים כאחד.

דרישות:
ניסיון קודם של שלוש שנים לפחות כ- data ANALYST - חובה.
ידע וניסיון מוכח ב- SQL ברמה גבוהה (כולל שאילתות מורכבות, פונקציות שונות) - חובה.
ידע וניסיון מוכח ב-Excel ברמה גבוהה (VLOOKUP, נוסחאות מורכבות וכו') - חובה.
הכרות עם כלי תחקור שונים (Power BI, Qlik וכו') - חובה.
ידע וניסיון ב- Python - חובה! המשרה מיועדת לנשים ולגברים כאחד.