Projekt realizowany jest dla międzynarodowej instytucji finansowej i koncentruje się na rozwoju nowoczesnej platformy danych opartej o Cloudera CDP w środowisku AWS. Celem projektu jest projektowanie oraz rozwój skalowalnych rozwiązań Data Lake i Operational Data Store, wspierających przetwarzanie dużych wolumenów danych oraz procesy analityczne i biznesowe. Zespół pracuje w środowisku Agile, wykorzystując nowoczesne technologie Big Data oraz rozwiązania chmurowe do budowy bezpiecznej i wydajnej architektury danych.
- min. 7 lat doświadczenia w projektach związanych z architekturą danych oraz rozwiązaniami chmurowymi,
- bardzo dobra znajomość platform Cloudera CDH/CDP (On-Premise oraz Cloud),
- doświadczenie w projektowaniu rozwiązań opartych o AWS,
- praktyczna znajomość technologii Big Data, w szczególności: Apache Spark, Kafka, Cassandra, HBase,
- doświadczenie w budowie procesów ETL oraz Data Pipeline z wykorzystaniem narzędzi takich jak Apache Airflow, Apache NiFi,
- zaawansowana znajomość j. angielskiego,
- dobra znajomość zasad architektury danych oraz nowoczesnych praktyk inżynierskich.