Middle Data Engineer (Apache NiFi)
NewBe an early applicantSummary
Develop and support ETL/Data Flow processes using Apache NiFi, design DWH, and work with large datasets using SQL (PostgreSQL, Impala, Hive), Python, or Java.
AM-Bits шукає Middle Data Engineer для роботи над проєктом, пов'язаним із розробкою та підтримкою ETL-процесів, проєктуванням DWH і роботою з великими обсягами даних.
Ключова технологія проєкту — Apache NiFi, тому шукаємо спеціаліста з практичним досвідом роботи з NiFi та побудови data pipelines.
Що потрібно буде робити
Розробляти, налаштовувати та підтримувати ETL/Data Flow процеси в Apache NiFi;
працювати з великими обсягами даних;
проєктувати та розвивати Data Warehouse (DWH);
працювати з PostgreSQL, Impala або Hive;
створювати та оптимізувати складні SQL-запити;
працювати з індексами, партиціями та бакетами;
використовувати Python або Java для задач обробки та трансформації даних;
брати участь у проєктуванні та оптимізації data architecture.
Що для нас важливо
Практичний досвід роботи з Apache NiFi — must-have;
досвід побудови та підтримки ETL-процесів;
досвід роботи з PostgreSQL, Impala або Hive;
практичний досвід побудови DWH;
впевнене володіння SQL;
розуміння принципів роботи з indexes, partitions, buckets;
досвід оптимізації складних SQL-запитів;
Python або Java — Middle level.
Буде перевагою
досвід роботи з Apache Kafka;
досвід роботи з Cloudera ecosystem.
Ми пропонуємо
оформлення за гіг-контрактом (Дія City) — компанія повністю покриває податкові відрахування;
14 робочих днів оплачуваної відпустки на рік;
remote або роботу з офісу в Києві — можна обрати комфортний формат;
гнучкий початок робочого дня;
компенсацію професійного навчання, курсів та сертифікацій, зокрема Cloudera, AWS/GCP;
сучасне робоче обладнання;
можливість переходу на інші проєкти всередині AM-Bits без необхідності змінювати роботодавця.