Middle - Senior Data Инженер (SberAI)

Привет! 👋 Мы — дата-инженерная команда внутри Управления экспериментальных систем машинного обучения SberAI. Наша миссия — поставлять качественные мультимодальные датасеты в продуктовые команды, которые развивают генеративные модели: speech, music, image, video, 3D, text.🔍 Парсить открытые источники, собирать готовые датасеты ⚙️ Оркестрировать ETL/ELT-пайплайны, фильтровать и описывать данные, прогонять модели на бенчмарках 👥 Организовывать проекты ручного сбора и валидации на крауд-платформах TagMe, Elementary, ЯЗ. Наш стек: 🛠 Python • SQL • S3 • Hadoop/GreenPlum • Airflow • Docker/K8s • Git • Vault • ML Space • Confluence • Jira✅ Знание Python (библиотеки для работы с данными и API) ✅ Опыт с ML-пайплайнами и датасетами для CV/NLP ✅ Понимание ETL/ELT и жизненного цикла данных ✅ SQL: SELECT, JOIN, агрегаты, подзапросы ✅ Базовое понимание форматов: CSV, JSON, Parquet, сериализация ✅ Опыт с Docker/Kubernetes Будет плюсом: * Airflow или другие оркестраторы * Понимание облачных сервисов* гибридный формат работы (2 раза в неделю офис м Кутузовская) * ежегодный пересмотр зарплаты, годовая премия * корпоративный спортзал и зоны отдыха * система обучения для профессионального и карьерного развития * расширенный полис ДМС с первого дня работы и страхование для семьи * программа ипотеки для сотрудников * подписка Прайм с возможностью совместного использования на трёх близких * вознаграждение за рекомендацию друзей в команду Сбера.