Middle Data Engineer

Innovative People - группа компаний, которая 17 лет предоставляет комплексные услуги в сфере информационных технологий. Нас объединяет любовь к информационным технологиям. Вместе мы стремимся создавать инновационные решения, которые меняют бизнес и улучшают жизнь людей.

Сейчас мы ищем Middle Data Engineer.

Мы создаём интеллектуальную ML - систему прогнозирования спроса, которая учитывает сезонность, промо, макро- и микроэкономические факторы, поведение клиентов и ограничения логистики.​​​​​​​​​​​​​​

Обязанности:

• Разработка ETL-процессов на базе прототипов и технических требований;

• Изменение существующих ETL-процессов, согласно меняющимся бизнес-требованиям;

• Продуктивизация кода, DQ-проверок, постановка на регламент, контроль работы ETL-процессов;

• Оптимизация и рефакторинг кода на уровне запросов и конфигураций (SQL/Python/Spark/HDFS);

• Взаимодействие с Системными аналитиками, Инженерами данных, Второй линией поддержки, DevOps, другими смежными подразделениями;

• Оперативное решение инцидентов на уровне третьей линии поддержки;

• Работа с Централизованным OLAP-хранилищем (Hadoop) и слоем репликации витрин данных (Greenplum). Также возможна работа с PostgreSQL, Teradata, Clickhouse и другими БД.

Требования:

Технический стек:

• StarRocks;
• Iceberg;
• SQL;
• Python;
• Hadoop;
• HDFS;
• HIVE;
• Spark;
• Airflow;
• Linux CLI;
• Greenplum или другая MPP-Database;
• YAML-нотация.

Условия:

• Аккредитованная it-компания;

• Рыночная белая зарплата (возможности карьерного роста);

• Удаленный формат работы;

• ДМС со стоматологией;
• Возможности посещения профильных конференций, семинаров, курсов повышения квалификации;
• Удобная и мощная техника для работы;
• Прикольный корпоративный мерч (+ всегда открыты новым идеям:).