דרישות המשרה:
· ניסיון של לפחות 3 שנים כ Data engineer – חובה
· ניסיון של 3 שנים עם Python בדגש על עבודה עם קבצי json ועבודה מול בסיסי נתונים חובה
· ניסיון מעשי של שנתיים לפחות ב AWS עם services של Athena/Glue/StepFunction/EMR/Redshift/RDS חובה
· עבודה מול קבצי טקסט למטרות AI ו LLM יתרון משמעותי
· ניסיון מעשי עם Spark עבור Large scale data -יתרון משמעותי
· עבודה מול שירותי REST API-יתרון משמעותי
· הבנות של טכניקות של אופטימיזציה ועבודה עם partitions של סוגים שונים של דאטה כמו parquet, Avro, hdfs, delta lake
· ניסיון בתפיסה ועבודה עם docker, Linux, CI/CD tools, Kubernetes
· הכרות עם פתרונות GenAI / prompt engineering יתרון משמעותי
אנחנו משתמשים בעוגיות כדי לאפשר תפקוד בסיסי ולבצע פונקציות מסוימות. כאן ניתן לנהל כל קטגוריה.