Команда DE-infra занимается разработкой инструмента управления главного двигателя автоматизации в компании Ozon – Airflow, по модели Airflow as a Service, а также разработкой инструмента интеграции данных. Мы помогаем нашим пользователям разрабатывать пайплайны движения данных и предосталяем им окружение для работы. В процессе работы мы используем практики DevOps, разнообразные инструменты и технологии: Python, Kubernetes, Airflow, Hadoop, Spark, MySQL, PostgreSql, Vertica, ClickHouse, Prometheus, Hive, Kafka, Grafana, Git, Helm.

Наш стек:

• Python
• Vertica PostgreSQL, ClickHouse, Hive, MS SQL
• PySpark, HDFS
• Airflow (Celery Executor, k8s)
• Gitlab CI/CD, Kubernetes, Helm
• Prometheus, Grafana, S3
• FastApi

Вам предстоит:

• Управлять жизненным циклом интеграций (создание, изменение, удаление, контроль)
• Совершенствовать текущие и разрабатывать новые инструменты доставки данных
• Помогать нашим пользователям реализовывать их пайплайны
• Участвовать в развитии Data Quality и Data Observability

Мы ожидаем:

• Уверенное владение Python
• Опыт работы с СУБД (Postgre SQL/MS SQL)
• Проактивность и огромное желание принести пользу
• Готовность работать полную неделю

Будет преимуществом:

• Опыт работы с Airflow
• Опыт работы с PySpark
• Опыт работы с MPP (Vertica)

Мы предлагаем:

• Возможность обучиться перспективной профессии на реальных задачах
• Систему наставничества и поддержку HR
• Динамичный и быстроразвивающийся бизнес, ресурсы, возможность вместе сделать лучший продукт на рынке e-commerce!
• Профессиональную команду, которой мы гордимся