Альфа-Банк

Старший инженер данных

Не указана
  • Москва
  • От 3 до 6 лет
  • Python
  • SQL
  • Spark
  • airflow
  • iceberg
Чем предстоит заниматься:
  • Интеграция источников данных по голосовым и текстовым коммуникациям клиентов со специалистами обслуживания и поддержки;
  • Реализация пакетных и потоковых сервисов обработки данных для оценки качества коммуникаций;
  • Создание витрин данных для моделей машинного обучения;
  • Эффективное взаимодействие в составе команды со специалистами по анализу данных и специалистами по развитию инфраструктуры.
Наши пожелания к кандидатам:
  • Опыт анализа данных - изучение семантики и связи таблиц и объектов данных, характеризующих общие бизнес-процессы, но находящихся в разных хранилищах, выявления причин расхождения семантически эквивалентных данных в разных хранилищах;
  • Высокий уровень знаний языка программирования Python;
  • Опыт реализации промышленных отказоустойчивых сервисов пакетной загрузки и трансформации данных (ETL) под управлением оркестратора задач Apache Airflow;
  • Понимание принципов микросервисной архитектуры;
  • Понимание принципов распределенных вычислений и обработки данных;
  • Понимание принципов потоковой обработки данных;
  • Хорошее знание платформы Apache Spark – опыт использования библиотеки pyspark;
  • Знание и опыт использования платформы потоковой обработки данных Apache Kafka;
  • Отличное знание SQL – создание сложных запросов с использованием табличных выражений (CTE) и оконных функций;
  • Хорошее знание и опыт использования реляционных баз данных Oracle или PostgreSQL;
  • Понимание особенностей обработки и хранения аналитических данных (OLAP), понимание отличий колоночных баз данных от строковых, знание колоночных форматов хранения данных – parquet, orc;
  • Хорошее знания и опыт использования хранилищ больших данных – Hadoop/HDFS, S3 - оба, форматы таблиц Hive часть хадупа, Iceberg.
Что мы предлагаем:
  • Стабильный и прозрачный доход: размер заработной платы обсуждается по итогам собеседования;
  • Возможен удаленнй формат работы или гибрид;
  • Сложные и интересные задачи, современный стек технологий;
  • Возможность вертикального и горизонтального карьерного роста: регулярно проходят тренинги, вебинары, митапы и демо-дни;
  • Доступ к бесплатным корпоративным библиотекам Alpina Digital, MyBook и бизнес-изданий;
  • Предложения от Банка только для сотрудников: собственный спортзал, а также скидки на услуги туристических агентств, продукты питания, в рестораны, бары, магазины.