Data engineer /Разработчик dwh

Разрабатывать и улучшать среду DWH [Postgres] (ETL / ELT pipelines, DDL, и тд), обеспечивать производительность и стабильность, при необходимости участвовать в...

Опыт создания архитектуры ETL/ELT потоков данных. Опыт работы с airflow, написание собственных операторов, хуков. Опыт промышленного программирования на Python...

Разрабатывать, тестировать и документировать ETL-процессы загрузки данных в ХД (Informatica, Oracle). Накатывать изменения функционала ETL на тестовую среду (SVN).

Опыт работы в сопровождении или разработке DWH от 1 года. Опыт разработки СУБД Oracle не менее 1 года.

Сбор и анализ требований от заказчика. Анализ источников данных. Постановка задач на разработку DWH. Ведение документации по проекту.

Высшее техническое или математическое образование. Знание SQL среднего уровня. Знание теории баз данных и принципов их построения. Опыт формирования ТЗ...

Создание и развитие систем класса DWH, MDM, НСИ, подключение новых источников данных. Анализ постановки задач ETL-разработки. Разработка/рефакторинг ETL...

Опыт работы в роли разработчика, функционального разработчика, системного аналитика. Опыт работы в проектах построения информационных систем и хранилищ в качестве...

Реализация ETL в Hadoop (с помощью Airflow). Работа с различными источниками данных: Oracle, MS SQL, API личных кабинетов, микросервисы.

Уверенное владение Python. Опыт использования эко-системы Hadoop: HDFS, Apache AirFlow, Hive, Kafka, Spark. Знание SQL. Опыт работы с реляционными...

Design and implement complex technical solutions to obtain, process, and store data. Automate and optimize internal ETL processes in MS...

Databricks (Python/PySpark/SQL). Data visualization with Power BI. 1+ years of relevant work experience. Advanced Python and SQL...