Мы создаем не просто аналитическое хранилище (Data Lake), а продвинутое – по принципам Data Mesh. Все данные мы описываем каталоге, чтобы их можно было легко находить и переиспользовать. Для каждого куска данных мы определяем владельца, который относится к ним как к продукту.

Для этого надо, чтобы в каждом подразделении были люди с навыками data engineer, погруженные в предметную область. Мы очень к этому стремимся и активно набираем людей.

Одно из требований к сотрудникам компании - постоянное развитие. Начальный уровень может быть и Junior, но в процессе работы он должен расти, чему мы активно способствуем. Наши сотрудники проходят периодическую оценку знаний и навыков, по итогам которой определяется их текущий уровень.

Ссылка на интервью Михаила Благова (руководителя чаптера дата инженеров) https://www.youtube.com/watch?v=ZwNgIZHTOcQ

Обязанности:

• Участие в организации процессов производства в командах чаптера дата инженеров.
• Проводить code review инженеров данных.
• Участвовать в собеседованиях и аттестациях инженеров данных чаптера.
• Вести бэклог совместно с Product Owner.
• Участвовать в программе менторинга для инженеров данных/разработчиков.

• опыт управления командой дата инженеров/ разработки от 3 лет;
• опыт удаленного управления командой (желательно);
• опыт разработки на java/ scala;
• глубокие знания стека: экосистема Hadoop ( HDFS, YARN, Hive, HBase), потоковая обработка (NiFi, Flink), брокер сообщений Kafka, Airflow, СУБД (PostgreSQL, Greenplum, Aerospike, Oracle, SQL Server), CI/CD (GitLab).