
HuntIT
Data Engineer (Senior)
- Amazon Web Services
- AWS
- Apache Kafka
- Debezium
- Flink
- Spark Structured Streaming
- Clickhouse
- S3
- iceberg
О нас:
HuntIT - это передовое рекрутинговое агентство, которое специализируется на поиске и подборе высококвалифицированных специалистов в сфере IT и Digital, сотрудничает с ведущими IT-компаниями, рекламными агентствами и работает над крупными проектами.
О компании-заказчике:
01.tech – IT-компания, создающая передовые веб-платформы, оказывающие влияние на мировую индустрию!
Основная цель – создание высоконагруженных систем, ежедневно обрабатывающих десятки тысяч запросов в секунду, терабайты данных и поддерживающие более 100 миллионов пользователей по всему миру.
В связи с активным расширением 01.tech мы находимся в поисках Senior Data Engineer
С чем предстоит работать?
- Подготовка данных для заказчика - аналитика;
- Разработка конвейера поставки данных в виде DAG процессов для Airflow;
- Интеграция с сервисами партнеров для получения данных от них;
- Построение микросервисов для обработки данных.
Здорово, если у тебя есть:
- Отличное знание SQL (команда использует ClickHouse и MySQL) оптимизации запросов, умение работать с планами запросов CRUD
- Технический бэкграунд в Python от 5 лет: навык проектирования фреймворков и библиотек, умение читать и анализировать код, опыт профилирования и оптимизации производительности/масштабируемости;
- Опыт разработки OLAP систем;
- Навыки работы с популярными DE/ML фреймворками: airflow, pandas, Kafka/RabbitMQ;
- Опыт получения данных из API, FTP;
- Навыки работы с контейнеризацией (Docker, Kubernetes)
- Автономность, умение находить лучшее решение задачи;
- Инициативность, внедрение новых решений;
- Коммуникабельность, бизнес-ориентированность.
Будет плюсом:
- Опыт работы с AWS/Microsoft Azure/ Google Cloud/Yandex Cloud;
- Опыт работы с Spark;
- Опыт работы с BI инструментами: Tableau/Power BI/Apache Superset.
Условия:
-
Качественный опыт, рост скиллов и максимально комфортная рабочая атмосфера;
-
Гибкое начало рабочего дня с 9:00 до 11:00 по МСК;
-
Офисы представлены в 2 странах мира;
-
Гибридный или удаленный формат работы;
-
Полностью оборудованное рабочее место с предоставлением техники;
-
Официальное трудоустройство;
-
ДМС со стоматологией после испытательного срока;
-
Компенсация занятий спортом, английского языка и сессий с психологом;
-
Зоны отдыха с настольным теннисом, самокатами и кухней;
-
Корпоративная библиотека;
-
Корпоративы с выездами на природу и призами, тимбилдинги, мастер-классы и т. д.;
-
Релокационный пакет и возможность получения отсрочки от призыва на мобилизацию.