Инженер-разработчик Big Data

з/п не указана

Вакансия в архиве

Работодатель, вероятно, уже нашел нужного кандидата и больше не принимает отклики на эту вакансию

Показать описание вакансии

Требуемый опыт работы: 3–6 лет

Полная занятость, полный день

МаксимаТелеком в поиске Инженера-разработчика Big data.

Что нам нужно:

  • развитие, оптимизация и поддержка инфраструктуры кластера Apache Hadoop (Cloudera): HDFS, Kafka, Flume, Spark, Hue, YARN, Oozie и тд.
  • разработка BigData-сервисов на языке Scala;
  • автоматизация процессов обработки данных в хранилище на сотни терабайт
  • автоматизация мониторинга качества данных
  • конфигурация и автоматизация разворачивания BigData-сервисов.

Что нам важно:

  • знание принципов и инструментов ETL систем
  • глубокое понимание экосистемы Hadoop
  • опыт работы с Kafka, Spark, Hive и другими сервисами Hadoop
  • опыт работы с базами данных PostgreSQL, Aerospike, Couchbase, HBase, Kudu, Vetrica или с аналогичными
  • знание языков Java, Scala, Python
  • опыт администрирования Linux и использования Docker
  • опыт автоматизации типовых задач с помощью скриптов (bash/perl/python)

Было бы отлично:

  • опыт работы с системами импорта данных Flume, StreamSets, Sqoop
  • опыт работы с системами управления потоками данных Airflow, Oozie, Luigi
  • опыт создания отказоустойчивых распределенных сервисов (nginx, haproxy, keepalived, corosync, pacemaker, rabbitmq и др.)
  • опыт работы с инструментами автоматической конфигурации (Ansible, Puppet) и CI/DD (Jenkins, Bamboo, TeamCity)

Условия:

  • масштаб: аудитория проектов – 7 млн. в месяц;
  • задачи: интересные и сложные. Отличная возможность для постоянного развития;
  • ТК РФ: чтим. «Белая» заработная плата;
  • забота: хороший пакет ДМС и корпоративная связь;
  • офис: современный, в ЦАО – Краснопролетарская улица, около ст. м. Менделеевская, м. Достоевская, м. Новослободская.

Адрес

Менделеевская, Достоевская, Новослободская, Москва, Краснопролетарская улица, 16
Показать на карте
­

Вакансия опубликована 23 апреля 2019 в Москве

Написать сопроводительное письмоПисьмо отправлено

Сопроводительное письмо к отклику

Похожие вакансии