Северсталь

Ведущий Data Engineer

Не указана
  • Москва
  • Полная занятость
  • Полный день
  • От 3 до 6 лет

Компания «Северсталь-инфоком» — это центр информационных и коммуникационных технологий крупнейшего горнодобывающего и сталелитейного холдинга «Северсталь». Кроме того, мы являемся аккредитованной Минцифры IT-компанией, что позволяет нашим сотрудникам пользоваться дополнительными льготами.

«Северсталь-инфоком» сегодня это:

  • 33 года опыта IT экспертизы;
  • 20 городов присутствия по России;
  • более 2200 сотрудников;
  • более 200 предоставляемых сервисов.

Мы ищем кандидатов, которые получают удовольствие от эффективной командной работы, которые не боятся новых технологий и готовы делиться своими идеями и навыками. Нам нравится, что использование наших решений не только эффективно, но и доставляет удовольствие пользователям. Мы не боимся амбициозных целей и верим, что каждое наше действие должно приносить результат.

Чем Вы будете заниматься:

  • разрабатывать архитектуру взаимодействия систем в платформе (экосистеме) обработки данных;
  • проектировать распределённые потоки данных в экосистеме Kafka (топики, партиции);
  • анализировать требования (взаимодействовать с архитекторами направлений, владельцами продуктов, функциональными командами смежных интегрируемых систем);
  • проектировать, разрабатывать и поддерживать ETL-процессов (Apache NiFi, Apache Airflow, Потоковые данные);
  • реализовывать алгоритмы преобразования данных;
  • интегрировать данные между внешними системами;
  • формировать и обрабатывать большие наборы данных, streaming данных (потоковых);
  • загружать данные из различных источников и организовывать хранение данных в Apache Kafka (потоковая и пакетная);
  • сопровождать системы ETL-окружения.

Мы ожидаем, что Вы:

  • имеете опыт от 3-х лет проектного опыта в области инженерии данных;

  • имеете опыт разработки на Python или Scala или Java;
  • знаете архитектуру данных, особенности и проблемы реализации различных алгоритмов обработки данных;
  • имеете опыт работы от 2-х лет с Apache Spark, Apache Flink, Apache Airflow, Kafka Streaming, Java, Groovy;
  • имеете опыт работы с распределенными БД PostgreSQL, Oracle;
  • понимаете архитектуру стека Apache Spark, Apache Flink, Apache Nifi, Apache Airflow, Apache Kafka.

Мы предлагаем:

  • трудоустройство в аккредитованной IT-компании и возможность пользоваться соответствующими льготами:

    1. льготная ипотека;

    2. отсрочка от призыва на военную службу для военнообязанных.

  • медицинскую помощь сотрудников: ДМС (включая стоматологию), доплату по больничному листу (с 1 по 10 день – 100% до оклада, с 11 по 20 день – 50%);
  • опции для родителей: материальную помощь за рождение ребёнка, доплату до 100% за отпуск по беременности и родам;
  • корпоративную мобильную связь и скидки от наших партнёров.