מפתח/ת לתחום BIG DATA

05.06 משרה שהייתה פתוחה, נפתחה שוב אצל עופר
לבנק מוביל דרוש/ה מפתח/ת מנוסה.
התפקיד כולל ביצוע עבודות תכנות על פי דרישות המשתמשים
ביצוע עבודות תחזוקה של היישומים- תחקור תקלות בייצור ותיקונם
תואר ראשון מדעי המחשב או נסיון קודם רלוונטי מוכח מהצבא
פיתוח פרויקטים גדולים בטכנולוגיות חדשניות בארגון , big data
בנייה ומימוש ארכיטקטורת דאטה מתקדמת
עבודה במתודולגיית אגייל
ידע ונסיון בכלים הבאים :
בבסיסי נתונים רלציוניים – Oracle
 ed databases כמו MongoDb and elasticsearch
 ETL – ibm DataStage
ידע בכלי פיתוח – NodeJs and Python
ניסיון בכתיבה תהליכי ETL – חובה
NIFI – חובה.
Logstash – יתרון

Cloudera :
HIVE , IMPALA  – מימוש היתרונות של כל אחד מהכלים – מתי יותר טוב להשתמש ב-IMPALA וב-HIVE
    צריך לדעת הבדל בין הפורמטים שונים של הקבצים  , למשל parquet , ORC
SQOOP – יתרון 
עבודה עם Oozie – יתרון

יתרונות:
ניסיון בטכנולוגיות תשתיות דאטה – big data
נסיון עם spark על בסיס scala  או python
נסיון בפיתוח ב streamming data  כמו kafka and spark-streamming