Middle Data Engineer
NewBe an early applicantSummary
Middle Data Engineer builds and maintains the data infrastructure for a gaming company: developing Airflow DAGs, setting up CDC pipelines into the analytical warehouse, building SQL data marts, and Flink streaming transformations while monitoring data quality. Core stack: Python, Java, SQL, Kafka, Airflow, dbt, Flink, Trino/Presto, MongoDB, PostgreSQL, AWS.
Data Engineering-команда отвечает за инфраструктуру данных: сбор, хранение и обработку игровых и продуктовых метрик. Мы помогаем аналитикам и продуктовым командам работать с данными быстро, стабильно и в нужном объеме.
Задачи, с которыми вам предстоит работать:
-
Разрабатывать и поддерживать DAG’и для Apache Airflow
-
Настраивать процессы CDC (Change Data Capture) для передачи продакшн-данных в аналитическое хранилище
-
Разрабатывать/оптимизировать витрины данных с использованием SQL для аналитических задач
-
Разрабатывать трансформации данных на базе Apache Flink
-
Следить за качеством данных с помощью инструментов Data Quality и оптимизировать их обработку
Какие навыки пригодятся:
-
Уверенные знания Python, Java
-
Глубокое понимание и умение работать с SQL
-
Опыт работы с Apache Kafka, Apache Airflow, dbt, Great Expectations, Apache Flink, Apache Trino/Presto, Hive, Docker, MongoDB, PostgreSQL, AWS
Будет плюсом:
-
Опыт работы с Apache Spark, Kubernetes, CI/CD, Helm, Terraform
-
Навыки программирования на Scala
У нас вы найдете:
-
Возможность влиять на продукт и решения внутри команды
-
Шанс внести свой вклад в продвижение игр, в которые играют миллионы игроков ежемесячно
-
Прямую коммуникацию без лишней бюрократии
-
Команду, где принято делиться опытом и поддерживать друг друга
-
Атмосферу свободы и открытости
-
Заботу о сотрудниках, которую вы заметите и в личном отношении, и через полезные бенефиты
И подробнее о бенефитах:
-
Официальное оформление
-
Возможность работать из комфортабельных офисов в разных странах или удаленно
-
Гибкий подход к формату и месту работы
-
Медицинское страхование, чекапы, компенсация сессий с психологом
-
Помогаем расти в профессии – корпоративная библиотека, внутренние курсы, английский от SkyEng, возможность учиться и посещать профильные мероприятия за счет компании
-
Вся необходимая техника – даем в пользование ноутбук, программы и лицензии, а также другую нужную технику для работы
-
Скидки на фитнес, спортзал в офисах, компенсация участия в спортивных соревнованиях