דרושים » AI » דרוש /ה data Engineer לארגון גדול בירושלים /רמת גן

דרישות:
ניסיון בפיתוח ותחזוקת תשתיות נתונים בענן וב On Premise (SQL/ MongoDB/S3)
ניסיון באופטימיזציה של שאילתות מורכבות -
ניסיון מוכח בבניית data Pipelines ותהליכי ETL
ניסיון בעבודה עם מסדי נתונים רלציוניים ו-NoSQL
ידע וניסיון בפיתוח בPython
ניסיון בעבודה עם כלי data Engineering כגון Apache Spark, Airflow
היכרות עם פלטפורמות ענן (בדגש על AWS /GCP) ושירותי נתונים בענן
ניסיון בעבודה עם data Warehouses/ Lakehouse
היכרות עם כלי ניטור ובקרת איכות נתונים
הבנה במודלים של ML/AI
הבנה מעמיקה בארכיטקטורת Big Data ומערכות מבוזרות המשרה מיועדת לנשים ולגברים כאחד.

דרישות:
ניסיון של 4 שנים ומעלה כ- data Engineer
ניסיון משמעותי בעבודה עם Apache Spark, NiFi, ו-Flink
ניסיון משמעותי בפיתוח בעזרת שפת Python לעיבוד נתונים ובניית data Flows
הבנה מעמיקה בארכיטקטורת נתונים ובתשתיות Big Data
שליטה מלאה ב-SQL, כולל כתיבת שאילתות מורכבות ואופטימיזציה
ניסיון בעבודה עם ElasticSearch: ניהול אינדקסים, אופטימיזציה וכתיבת שאילתות
ניסיון בעבודה עם MongoDB וכתיבת Aggregation Pipelines
ידע בעבודה עם Cloudera CDP ושירותי Kafka
ניסיון בעבודה עם מודולי AI ושילובם בפתרונות דאטה
הכרות עם פיתוח מיקרו-שירותים ו-OpenShift
ניסיון עם כלי ניהול תצורה בפיתוח מערכות מידע ודיגיטל

דרישות השכלה:
תואר אקדמי בהנדסה / מדעי המחשב או תואר אקדמי אחר או הנדסאי תכנה + קורסים בניהול מוצר (30 שעות לפחות) או בוגר יחידה טכנולוגית בצה"ל (ממר"ם, 8200, תקשוב, וכו') עם ניסיון רלוונטי המשרה מיועדת לנשים ולגברים כאחד.

דרישות:
דרישות חובה:
לפחות 3 שנות ניסיון בפיתוח כ- data Engineer
ניסיון והתמחות בטכנולוגיות Streaming (לפחות אחד מהבאים: Apache NiFi / Flink / Spark)
השכלה רלוונטית בתחום המחשבים או מערכות מידע (תואר / הנדסאי / קורסים / בוגרי יחידה טכנולוגית)
ניסיון משמעותי בפיתוח ב- Python
הבנה בארכיטקטורת Big Data, כולל פיתוח תהליכי עיבוד נתונים ואינטגרציה

יתרון:
ניסיון עם ElasticSearch כולל כתיבת שאילתות, ניהול אינדקסים ואופטימיזציה
ניסיון בעבודה עם MongoDB כולל Aggregation Pipelines
שליטה בכתיבת שאילתות SQL מורכבות ואופטימיזציה של ביצועים
היכרות עם פלטפורמת Cloudera CDP ושירותי Kafka
פיתוח ממשקי API ופתרונות מבוססי Microservices, כולל עבודה עם OpenShift
היכרות עם כלי BI : SSAS ו-DataStage
ניסיון בשילוב מודולי AI בפתרונות דאטה ויכולת הבנה של תשתיות מבוססות AI המשרה מיועדת לנשים ולגברים כאחד.

דרישות:
ניסיון של 4 שנים ומעלה בתחום
שליטה בטכנולוגיות ETL /ELT ב-GCP (Serverless Function, Cloud Run, Dataflow, Dataprep) יתרון משמעותי
ניסיון בעבודה עם Pandas ( Python ) יתרון
ניסיון בניהול מסדי נתונים וביצוע שאילתות ב-BigQuery יתרון
ניסיון בהובלת ופיתוח פרויקטים בתחום המשרה מיועדת לנשים ולגברים כאחד.

דרישות:
השכלה רלוונטית.
לפחות 6 שנים ניסיון כמפתח ETL ועבודה עם כלי ETL -חובה.
ניסיון בתכנון ובניית data Pipelines מורכבים-חובה.
שליטה בשפת SQL ברמה גבוהה וניסיון בכתיבת שאילתות מורכבות- חובה.
ניסיון בעבודה על כלי ETL - DataStage,Talend,Informatica,SSIS,Airflow-יתרון.
ניסיון בעבודה עם HADOOP,SPARK,KAFKA-יתרון.
ניסיון בעבודה מול כלים ותשתיות בענן-יתרון. המשרה מיועדת לנשים ולגברים כאחד.

דרישות:
ניסיון של 4 שנים לפחות כ data Engineer - תוך עבודה משמעותית באחד או יותר מהשירותים
הבאים:
Apache Spark
NiFi Apache
Flink Apache
ניסיון משמעותי בפיתוח בשפת Python לעיבוד נתונים ובניית data Flows
הבנה בארכיטקטורת נתונים ותשתיות Big Data כולל אתגרים ופתרונות
שליטה מלאה ב - SQL
יתרון משמעותי לניסיון בסביבות השפות והכלים:
MongoDB וכתיבת Aggregation Piplines
כתיבת שאילתות SQL מורכבות ואופטימיזציה של ביצועים
שירותי Cloudera בסביבת CDP
Kafka
מודולי AI ותהליך שילובם בפתרונות
הכרות עם פיתוח לעולם ה Micro-Services בכלל ו OpenShift בפרט
עבודה עם כלי ניהול תצורה בפיתוח המשרה מיועדת לנשים ולגברים כאחד.

דרישות:
מה אנחנו מחפשים?
?? 5-6+ שנות ניסיון בפיתוח ETL ועבודה עם כלי ETL (חובה)
?? ניסיון בתכנון ובניית data Pipelines ב- DWH (חובה)
?? 4+ שנות ניסיון בניהול צוותים טכנולוגיים או הובלה טכנולוגית של פרויקטים
?? שליטה מעמיקה ב- SQL כולל stored procedures, Indexing, Performance Tuning
?? ניסיון עם Datastage, Talend, Informatica, SSIS, Airflow (חובה)
?? ניסיון עם Kafka, Spark, Hadoop יתרון משמעותי!
?? ניסיון בעולם המס / אכיפה כלכלית יתרון

?? מחפשים את האתגר הבא בעולם הדאטה? בואו להצטרף לצוות מנצח! המשרה מיועדת לנשים ולגברים כאחד.

דרישות:
- 4 שנות ניסיון כ- data Engineer
- ניסיון בעבודה עם Apache Spark / Apache NiFi / Apache Flink
- ניסיון בפיתוח ב- Python לעיבוד נתונים ובניית data Flows
- ניסיון ב-SQL
- ניסיון בארכיטקטורת נתונים ותשתיות Big Data המשרה מיועדת לנשים ולגברים כאחד.