Data engineer
Summary
Builds and optimizes Hadoop data pipelines, wraps SQL scripts into production workflows, and writes events to Kafka for client preference assignments.
Навыки: Apache Hadoop, Jenkins, Scala, Apache Kafka. Квалификация: Middle. Специализации: Инженер по данным.
❇️ Data engineer ❇️ | Компания Top Selection
🔥 Мы в поиске Data инженера на проектную занятость
Грейд: Middle+
Ставка: от 256К до 280К
Гражданство/Локация: РФ
Загрузка: фуллтайм
Срок: долгосрочный
Оформление: только ИП 📌 (не СЗ, не ТК)
Описание проекта:
Проект по подключению преференций клиентам в рамках бизнес-потребностей.
✅ Требования:
Обязательно:
Опыт работы от 4-х лет
Опыт работы с Hadoop и Jenkins от 1го года
Опыт сборки дистрибутивов для промышленных процессов от 1го года
➕Желательно:
опыт работы на Scala и c Kafka
Задачи:
Необходимо разработка потоков данных и оптимизация расчетов на Hadoop с учетом критериев от бизнеса и писать события в Кафку для успешных назначений в АС приемнике. Фреймворк самописный, через который необходимо оборачивать sql-скрипты в рабочий ПРОМ-поток.