Инженер Big Data

Разработка хранилищ данных, витрин данных. Проектирование, разработка и поддержка ETL-процессов. Контроль качества загружаемых данных (ручные и автоматические тесты DQ).

Опыт в языках программирования: SQL, Python. Опыт работы с одним или несколькими СУБД: PostgreSQL, Clickhouse, Greenplum, MS SQL Server.

Помощь коллегам DS в оптимизации их работающих пайплайнов. Проактивность с предложениями оптимизации. Взаимодействие с коллегами DevOps по настройке окружений, деплоя...

Уверенные знания Python 3.7 + Spark 2.4 / Spark 3.0 (структуры данных, алгоритмы, концепции языка). Уверенные знания SQL...

Проектировать и собирать витрины данных по разработанному ТЗ. Проектировать, разрабатывать и поддерживать ETL-процессы для загрузки данных из/в Data...

Есть опыт на позиции Data Engineer от 2,5 лет. Понимание основных операций ДБ и DWH. Опыт работы с Hadoop...

Подготовкой и поддержкой полного цикла движения данных от источника до витрины данных. Построением следующей версии корпоративной платформы данных с использованием...

Любит и умеет обращаться с SQL: может составить и оптимизировать сложные аналитические запросы. Уверенно владеет Pyton: хорошо знает основы языка...

Разработка/доработка ETL процессов. Проектирование новых ETL решений. Тестирование и внедрение ETL процессов.

Опыт работы с MMP платформами (Greenplum, Teradata). Хорошие знания в SQL (PostgreSQL). Опыт использования ETL (Informatica, SAS DI, SSIS, NiFi...

Центр изучения и сетевого мониторинга молодёжной среды – аккредитованная IT-компания, учреждённая по поручению Президента России в октябре 2018 года.

разработка объектов БД в ClickHouse (табличные движки, матвью), понимание архитектуры, особенностей работы. - понимание концепций построения хранилищ данных в ClickHouse.