Big Data Engineer(Fix 6 hónapos projekt)
Partnerünk piacvezető a hazai elektronikus számlázási, mobilfizetési, parkolási és útdíjkezelési megoldások területén, amelyeket naponta számos felhasználó alkalmaz. Nagy rendelkezésre állású rendszereik bővítéséhez és optimalizálásához keresünk új csapattagot!
Lokáció: Budapest, III. kerület
Feladatok:
Big Data platformok tervezésében és kiépítésében való aktív részvétel.
Open source technológiákon alapuló Data Lakehouse megoldások fejlesztése.
Nagyméretű adathalmazok kezelésének, mozgatásának és optimalizálásának megtervezése.
Rendszerek teljesítményének monitorozása és infrastruktúra fejlesztési javaslatok kidolgozása.
Szoros együttműködés az adattárház, backend és DevOps csapattal.
Elvárások:
Legalább 3 éves releváns tapasztalat Data Engineer területen.
Elosztott rendszerek mélyreható ismerete.
Több adatforrásból származó adatok integrációjában szerzett gyakorlat.
Konténertechnológiák ismerete (pl. Docker, Kubernetes).
Verziókövetési rendszerek (Git) magabiztos használata.
Analitikus gondolkodásmód.
Open source eszközökkel adatfeldolgozási folyamatok építése (Airflow, Spark, Iceberg).
Big Data analitikus motorok alkalmazásában szerzett tapasztalat (pl. Spark, Trino, Flink, Hive).
Elosztott objektumtárolók ismerete (Apache Ozone).
Előnyök:
Streaming architektúrákban való jártasság (Kafka, Pub/Sub).
Streaming pipeline fejlesztési tapasztalat (Kafka Connect, Flink).
CDC alapú adatfolyamok kezelése (Debezium).
SparkML ismerete.
Hadoop cluster menedzsment ismerete.
NoSQL adatbázisok (HBase, MongoDB, Neo4j) használatában szerzett gyakorlat.
Egyéb Big Data komponensek ismerete (pl. NiFi, Ambari, Kudu).
Partnerünk ajánlata:
Versenyképes fizetési csomag.
Hibrid munkavégzés (1-2 nap az irodában).
Támogató környezet magasan képzett kollégákkal.
Modern iroda csúcstechnológiákkal, amelyek az innovációt és a folyamatos fejlődést szolgálják.
Munkavégzés helye: Budapest
Küldje el önéletrajzát a következő e-mail címre: info@foxhr.hu