המומחים של כלנית מגייסים למחלקת הדאטה בחברה ציבורית הגדולה בארץ data Engineer מנוסה שיצטרף לצוות מוביל בתכנון, פיתוח וניהול של תהליכי עיבוד נתונים מתקדמים.
התפקיד כולל:
מתן פתרונות לבעיות ברמת מורכבות גבוהה במסד הנתונים
בדיקת איכות הנתונים ותהליכי ה- ETL (pipelines)
הבנת מודלים אנליטיים מורכבים
ניהול והרצת שאילתות מורכבות ואופטימיזציה שלהן
פתרון בעיות טכניות מורכבות בתשתיות ומאגרי נתונים
פיתוח ותחזוקה של תהליכי ETL באמצעות Apache NiFi ו-Apache Spark
דרישות:
ניסיון של 4 שנים ומעלה כ- data Engineer
ניסיון משמעותי בעבודה עם Apache Spark, NiFi, ו-Flink
ניסיון משמעותי בפיתוח בעזרת שפת Python לעיבוד נתונים ובניית data Flows
הבנה מעמיקה בארכיטקטורת נתונים ובתשתיות Big Data
שליטה מלאה ב-SQL, כולל כתיבת שאילתות מורכבות ואופטימיזציה
ניסיון בעבודה עם ElasticSearch: ניהול אינדקסים, אופטימיזציה וכתיבת שאילתות
ניסיון בעבודה עם MongoDB וכתיבת Aggregation Pipelines
ידע בעבודה עם Cloudera CDP ושירותי Kafka
ניסיון בעבודה עם מודולי AI ושילובם בפתרונות דאטה
הכרות עם פיתוח מיקרו-שירותים ו-OpenShift
ניסיון עם כלי ניהול תצורה בפיתוח מערכות מידע ודיגיטל
דרישות השכלה:
תואר אקדמי בהנדסה / מדעי המחשב או תואר אקדמי אחר או הנדסאי תכנה + קורסים בניהול מוצר (30 שעות לפחות) או בוגר יחידה טכנולוגית בצה"ל (ממר"ם, 8200, תקשוב, וכו') עם ניסיון רלוונטי המשרה מיועדת לנשים ולגברים כאחד.