Медиапоинт - международный провайдер высокотехнологичных решений в индустрии онлайн-развлечений.
В настоящий момент мы в поисках Data Engineer/Дата инженер!
В ваши задачи будет входить:- Проектировать, разрабатывать и поддерживать пайплайны для загрузки источников данных (потоковая загрузка данных, kafka);
- Проектировать, разрабатывать и поддерживать потоковых (near realtime и real time) витрин данных;
- Разработка фреймворков, инструментов, шаблонных пайплайнов для более эффективной загрузки и обработки данных в корпоративный dwh;
- Обеспечение SLA и качества данных.
-
Отличные знания минимум 3х технологий Kafka, Kafka connect, Kafka Streams, Spark Streaming;
-
Опыт работы в построении потоковых витрин данных от 3х лет;
-
Отличные знания в SQL (в том числе оконные функции), Python;
-
Желателен опыт участия в проектировании DataLake/DWH (kappa, lambda архитектура);
-
Хорошие знания ClickHouse (или других аналитических СУБД), DBT, инструментов оркестрации потоков данных (Prefect, AirFlow, oozie) будет большим плюсом;
-
Опыт работы на проектах построения хранилищ данных/озер данных 4+ лет;
Будет плюсом: знания одного или нескольких языков программирования для решения задач обработки данных: Python, Java, Scala;
Что мы можем предложить:
-
Возможность полностью работать удаленно из любой точки мира или в офисе (Москва, Кипр) для желающих поработать в формате коворкинга или с закрепленным рабочим местом;
-
Оформление в штат компании и не только;
-
Возможность получать зп в любой валюте;
-
Плавающее начало дня, 8 часов рабочий день;
-
Разнообразные корпоративные программы.