Помощь коллегам DS в оптимизации их работающих пайплайнов. Проактивность с предложениями оптимизации. Взаимодействие с коллегами DevOps по настройке окружений, деплоя...

Уверенные знания Python 3.7 + Spark 2.4 / Spark 3.0 (структуры данных, алгоритмы, концепции языка). Уверенные знания SQL...

Проектирование и разработка запросов, вычислительных программ по бизнес требованиями. Осуществление поиска и первичный анализ данных. Импорт данных в HDFS +...

Опыт написания программ распределенных вычислений (Spark) и ETL процессов. Опыт работы с бизнес требованиям (сбор, формирование требований, анализ).

Разработка архитектуры доставки, хранения и обработки данных. Разработка и поддержка автоматизированных регулярных ETL процессов. Организация хранения данных с использованием инфраструктуры...

Опыт работы в big data. Python (Java/scala тоже можно)опыт программирования от 2-х лет на SQL, Python.

Участие в создании новых и эффективных ETL-процессов. Построение и автоматизация аналитических отчетов. Настройка и поддержка системы для обработки больших...

Умеете проектировать витрины данных и отлаживать ETL процессы. Понимаете основ реляционных баз данных. Опыт работы с Superset или аналогами.

Создание и поддержка ETL-процессов загрузки данных в Datalake из IT-систем Банка для применения в моделях. Создание и поддержка...

Уверенное владение Python (применение ООП, знание стандартных библиотек), SQL(на уровне сложных запросов). Опыт разработки решений на Spark (Scala, pyspark...

Проектирование и разработка хранилища. Работа с многочисленными источниками данных. Создание и поддержка витрин. Разработка ETL процессов.

Уверенное владение Python (знание основных библиотек, ООП). Знание SQL. Опыт решения задач на Spark/PySpark (от 1 года).