DataOps (Data Platform)

О нас:

Мы ищем опытного DataOps инженера, который присоединится к нашей команде и будет создавать и поддерживать инфраструктуру для рекомендательных систем в E-commerce. Если ты готов решать сложные инфраструктурные задачи, обеспечивать стабильность и скорость работы ML-сервисов и помогать выводить в production самые современные модели, — нам по пути!

Чем предстоит заниматься:

• Управление инфраструктурой DWH, внедрение и поддержка ci/cd для разработки моделей данных и машинного обучения.

• Разработка, развертывание, мониторинг и поддержка надежных, масштабируемых и эффективных пайплайнов данных и их оркестрация (airflow).

• Разработка, внедрение и поддержка end-to-end) ML-пайплайнов от сбора данных и обучения до развертывания и мониторинга моделей

• Проектирование и разработка MLOps-платформы (включая выбор и интеграцию инструментов mlops), развертывание и поддержка инфраструктуры для ML-задач: JupyterHub-кластер с GPU, Airflow, объектное и реляционное хранилище (Clickhouse, PostgreSQL, S3 и др).

• Взаимодействие с ML- и Дата-инженерами для внедрения моделей и инструментов в production.

• Создание комплексной системы мониторинга пайплайнов и платформ (отслеживание производительности, потребления ресурсов, состояния) и настройка алёртинга при сбоях в пайплайнах или отклонениях в качестве данных.

• Автоматизация рутинных операций и создание инструментов самообслуживания для команды данных.

Что мы ожидаем от тебя:

• Уверенные навыки работы с Docker и системами оркестрации (Kubernetes, Airflow).

• Практический опыт построения CI/CD-процессов для хранилищ данных.

• Уверенные знания SQL, Python и Git.

• Опыт развёртывания и администрирования инфраструктуры для ML-задач (GPU-кластер, Airflow, хранилища данных).

• Практический опыт с облачными платформами.

• Понимание принципов CI/CD, опыт автоматизации пайплайнов и деплоя сервисов.

• Опыт работы с API, понимание особенностей работы высоконагруженных систем.

• Знание систем потоковой обработки данных.

• Опыт работы с инструментами мониторинга и логирования.

• Уверенные навыки работы в Linux-среде.

Будет плюсом:

• Опыт внедрения систем управления экспериментами (MLflow, ClearML).

Что мы предлагаем:

• Работа в современной IT-компании.

• Возможность реализовать свои идеи и влиять на продукт.

• Гибридный или полностью удаленный формат работы.

• Оформление по ТК РФ.

• Гибкое начало рабочего дня.

• Выдаем современное оборудование.

• Скидки от партнеров.