Data Engineer (38074)

Hľadám skúseného Data Engineera, ktorý sa pripojí k tímu a pomôže s vývojom dátových pipeline pre energeticky efektívne spracovanie dát v reálnom čase. Budete mať na starosti integráciu dát z rôznych systémov pre AI/ML modely a návrh škálovateľnej dátovej architektúry. Ak máte skúsenosti s technológiami ako Hadoop, Spark, Apache Airflow a máte znalosti v distribuovanom computingu, hľadám práve vás.

🚀 Projekt
- vývoj a správa dátových pipeline pre energeticky efektívne spracovanie dát v reálnom čase
- integrácia a transformácia dát z rôznych systémov pre modely AI/ML
- návrh škálovateľnej dátovej architektúry podporujúcej úsporu energie
- spolupráca s AI/ML tímami na zlepšení výkonu modelov
- identifikácia a dokumentácia dátových zdrojov
- riešenie problémov s neúplnými dátami a optimalizácia ukladania dát pre úsporu energie
- vedenie dokumentácie a komunikácia technických detailov so zainteresovanými stranami
- neustále zlepšovanie procesov pre efektivitu a inovácie v oblasti udržateľnosti

🎯 Skills
- Python, SQL, Java alebo Scala
- Hadoop, Spark, Kafka
- Apache Airflow, Talend
- skúsenosti s DevOps a CI/CD
- Apache NiFi, AWS Glue
- modelovanie dát a optimalizácia dátového spracovania
- MySQL, PostgreSQL, MongoDB; dátové jazera/úložiská: Snowflake, Redshift
- znalosti v distribuovanom a edge computingu pre efektívne spracovanie dát
- silné analytické schopnosti, skúsenosti s AI/ML pre zlepšenie energetickej efektivity
- AJ B2

💡 Nice to have
- NJ B2