HuntIT

Data Engineer (Senior)

Не указана
  • Москва
  • Полная занятость
  • Удаленная работа
  • От 3 до 6 лет
  • Amazon Web Services
  • AWS
  • Apache Kafka
  • Debezium
  • Flink
  • Spark Structured Streaming
  • Clickhouse
  • S3
  • iceberg

О нас:
HuntIT
- это передовое рекрутинговое агентство, которое специализируется на поиске и подборе высококвалифицированных специалистов в сфере IT и Digital, сотрудничает с ведущими IT-компаниями, рекламными агентствами и работает над крупными проектами.

О компании-заказчике:
01.tech
– IT-компания, создающая передовые веб-платформы, оказывающие влияние на мировую индустрию!

Основная цель – создание высоконагруженных систем, ежедневно обрабатывающих десятки тысяч запросов в секунду, терабайты данных и поддерживающие более 100 миллионов пользователей по всему миру.

В связи с активным расширением 01.tech мы находимся в поисках Senior Data Engineer

С чем предстоит работать?

  • Подготовка данных для заказчика - аналитика;
  • Разработка конвейера поставки данных в виде DAG процессов для Airflow;
  • Интеграция с сервисами партнеров для получения данных от них;
  • Построение микросервисов для обработки данных.

Здорово, если у тебя есть:

  • Отличное знание SQL (команда использует ClickHouse и MySQL) оптимизации запросов, умение работать с планами запросов CRUD
  • Технический бэкграунд в Python от 5 лет: навык проектирования фреймворков и библиотек, умение читать и анализировать код, опыт профилирования и оптимизации производительности/масштабируемости;
  • Опыт разработки OLAP систем;
  • Навыки работы с популярными DE/ML фреймворками: airflow, pandas, Kafka/RabbitMQ;
  • Опыт получения данных из API, FTP;
  • Навыки работы с контейнеризацией (Docker, Kubernetes)
  • Автономность, умение находить лучшее решение задачи;
  • Инициативность, внедрение новых решений;
  • Коммуникабельность, бизнес-ориентированность.

Будет плюсом:

  • Опыт работы с AWS/Microsoft Azure/ Google Cloud/Yandex Cloud;
  • Опыт работы с Spark;
  • Опыт работы с BI инструментами: Tableau/Power BI/Apache Superset.

Условия:

  • Качественный опыт, рост скиллов и максимально комфортная рабочая атмосфера;

  • Гибкое начало рабочего дня с 9:00 до 11:00 по МСК;

  • Офисы представлены в 2 странах мира;

  • Гибридный или удаленный формат работы;

  • Полностью оборудованное рабочее место с предоставлением техники;

  • Официальное трудоустройство;

  • ДМС со стоматологией после испытательного срока;

  • Компенсация занятий спортом, английского языка и сессий с психологом;

  • Зоны отдыха с настольным теннисом, самокатами и кухней;

  • Корпоративная библиотека;

  • Корпоративы с выездами на природу и призами, тимбилдинги, мастер-классы и т. д.;

  • Релокационный пакет и возможность получения отсрочки от призыва на мобилизацию.