Senior Data Engineer

Требуемый опыт работы: 1–3 года

Полная занятость, полный день

Петрович-Тех
4,7

Санкт-Петербург

Напишите телефон, чтобы работодатель мог связаться с вами

Чтобы подтвердить, что вы не робот, введите текст с картинки:
captcha

Строительный Торговый Дом «Петрович» - вторая по величине торговая сеть, которая продает материалы для строительства и ремонта, а также комплектует крупные стройки в России. Головной офис находится в Санкт-Петербурге, компания существует с 1995 года.

За последние несколько лет ИТ-инфраструктура компании сформировалась в полноценный highload-проект с распределенной вычислительной системой, очередями отложенной нагрузки и горизонтальным масштабированием. И весной 2022 года как отдельная ИТ-компания была создана организация "Петрович-Тех".
В нашей компании больше 200 человек, и с каждым годом нас становится все больше.

Сейчас мы находимся в активном поиске Data Engineer

Чем предстоит заниматься:

  • разработка хранилища данных на базе ClickHouse;
  • построение ETL-процессов;
  • написание / оптимизация / профилирование SQL/NoSQL запросов;
  • расчет сложных аналитических показателей в витринах данных;
  • настройка ClickHouse (шардинг, репликация) в т.ч. взаимодействия с Kafka (попадание сырых данных, решение возможных проблем с очередностью сообщений, валидностью данных);
  • участие в тестировании потоков с целью обеспечения их стабильной работы;
  • написание backend сервисов на Java;
  • участие в разработке архитектуры, процессов и инструментов для работы с данными;
  • обеспечение контроля качества данных, мониторинг, анализ и устранение проблем с качеством данных.

Что мы ждем от тебя:

  • глубокие знания SQL;
  • умение работать с планами запросов;
  • опыт работы с ClickHouse;
  • опыт работы с брокерами сообщений (Kafka);
  • опыт работы с Kubernetes проектами;
  • опыт работы с Java;
  • практический опыт участия в проектах по созданию DWH, Data lake;
  • практический опыт построения и развития высоконагруженных систем.

Наш стек:
ClickHouse, Pythоn, SQL, AirFlow, Spark, Apache Kafka, Yandex Cloud, Big Data, Kubernetes, FastAPI\Flask API, Java

Что мы предлагаем:

  • официальное трудоустройство в аккредитованную ИТ компанию ООО "Петрович-Тех";
  • полис ДМС через 3 месяца, ДМС+стоматология через год;
  • участие в конференциях и обучение;
  • йога в офисе, команды по баскетболу, волейболу, футболу;
  • классные корпоративы;
  • график работы: 5/2, удаленный формат работы, но можно работать в нашем уютном офисе на Парнасе, у нас есть парковка, велопарковка и корпоративный транспорт от м. Парнас, м. Просвещения, м. Гражданский проспект до офиса и обратно;
  • чай, кофе, печеньки;
  • врач в офисе (1 раз в неделю);
  • приветственный набор;
  • приветственный бонус (при трудоустройстве в нашей компании тебя ожидает приятный бонус - премия в размере полного оклада. 50% премии ты получишь при устройстве на работу и вторые 50% премии выплачиваются после удачного прохождения испытательного срока);
  • "Бери с собой друзей!" — за каждого сотрудника, трудоустроенного по твоей рекомендации, ты получишь интересное денежное вознаграждение.

Вакансия опубликована 27 ноября 2023 в Санкт-Петербурге

Отзывы о компании

4,7отлично
Оценка Dream Job

100%

Рекомендуют
Ваши отзывы помогают людям принимать взвешенные карьерные решения
Оставить отзыв

Что говорят сотрудники

Отзыв сотрудника
Ноябрь 2023
Условия труда, ДМС + стоматология, корпоративная свобода, отсутствие дресс-кода, различные бонусы, поездки и активности
Хотите видеть здесь больше отзывов?
Дайте знать об этом — попросим работодателя открыть их

Похожие вакансии

Санкт-Петербург
Опыт от 3 до 6 лет
Откликнитесь среди первых
Реализация компонентов платформы, связанных с обработкой больших данных. Реализация распределенных алгоритмов на больших данных и внедрение моделей машинного обучения.
Профильное образование: информационные технологии, статистика, математика. Опыт разработки на Scala или Java от от 3-х лет. Опыт работы по...
Опыт от 3 до 6 лет
Откликнитесь среди первых
Можно из дома
Собрать и возглавить команду разработки нового модуля программного продукта Neoflex Reporting RWA для автоматизации расчетов нормативов и показателей кредитного риска...
Опыт разработки высоконагруженных аналитических систем и Big Data решений на базе Apache Spark. Опыт проектирования архитектуры банковских приложений.
Санкт-Петербург
Опыт от 3 до 6 лет
Откликнитесь среди первых
Создавать средства взаимодействия с источниками данных, поддерживать используемые сторонние коннекторы. Имплементировать логику ETL-трансформаций на Spark, PL/SQL, Hive, Impala.
Опыт работы ETL-разработчика/инженера по работе с данными от 3х лет. Опыт работы со Spark, Scala/Python.
Санкт-Петербург, Петроградская и еще 1 
Опыт от 3 до 6 лет
Откликнитесь среди первых
Используешь инструменты визуализации данных Tableau, Power BI, DataLens и др. Работаешь с DWH, Data Lakes, КХД.
Знаешь на продвинутом уровне SQL (DML, DDL, вложенные/рекурсивные запросы, оконные функции). Понимаешь принципы работы Spark и связки с AirFlow.
Опыт от 3 до 6 лет
Откликнитесь среди первых
Разработка структуры слоев хранилища данных, включая витрины данных. Автоматизация подготовки данных для задач аналитики и ML. Оптимизация запросов.
Опыт работы в качестве инженера данных от 3 лет. Знание теории СУБД и архитектурных принципов построения хранилищ данных.
Санкт-Петербург
Опыт от 3 до 6 лет
Откликнитесь среди первых
Реализация компонентов платформы, связанных с обработкой больших данных. Реализация распределенных алгоритмов на больших данных и внедрение моделей машинного обучения.
Профильное образование: информационные технологии, статистика, математика. Опыт работы по специальности от 3-х лет. Опыт разработки на Scala или Java...
Петрович-Тех
4,7

Санкт-Петербург