Junior Data Engineer (Python)

Проектирование и разработка аналитических витрин по предсказаниям поведения клиентов, их склонностей и потребностей, отчетности и моделирования на стеке Hadoop +...

Опыт проектирования витрин данных и хранилищ данных. Знание типовой инфраструктуры DWH. Опыт разработки на платформе Hadoop от 1,5 лет.

Реализация компонентов платформы, связанных с обработкой больших данных. Реализация распределенных алгоритмов на больших данных и внедрение моделей машинного обучения.

Профильное образование: информационные технологии, статистика, математика. Опыт разработки на Scala или Java от 1-го года. Опыт работы по специальности...

Построение моделей данных и разработка схем для новых источников данных. Авто-мониторинг, устранение проблем и оптимизация пайплайнов данных.

Опыт написания Python не менее 5 лет. Опыт работы с технологиями ETL (такими как Apache Spark или оркестровка с Apache...

Разработка и тестирование ETL-потоков (Greenplum / Hadoop / Spark). Разработка сервисов на Python. Написание и оптимизация сложных SQL-запросов.

Опыт работы на позиции дата инженером (Data Engineer) от 2 лет. Опыт в разработке ETL-процессов от 1 года.

Построение моделей данных и разработка схем для новых источников данных. Авто-мониторинг, устранение проблем и оптимизация пайплайнов данных.

Опыт написания Python не менее 5 лет. Опыт работы с технологиями ETL (такими как Apache Spark или оркестровка с Apache...

Разработка хранилищ данных, витрин данных. Проектирование, разработка и поддержка ETL-процессов. Контроль качества загружаемых данных (ручные и автоматические тесты DQ).

Опыт в языках программирования: SQL, Python. Опыт работы с одним или несколькими СУБД: PostgreSQL, Clickhouse, Greenplum, MS SQL Server.