Ваши задачи:
-
Проектировать, разрабатывать и поддерживать ETL/ELT-пайплайны;
-
Настраивать процессы доставки изменений данных (CDC) из транзакционных баз (PostgreSQL, MongoDB);
-
Проектированием схем, настройкой кластера (шардирование, репликация), оптимизацией запросов и выбором оптимальных движков таблиц под бизнес-задачи;
-
Участвовать в формировании архитектуры данных, создавать и вести техническую документацию.
Мы ожидаем:
-
Опыт работы на позиции Data Engineer от 5 лет;
-
Глубокое, практическое понимание ClickHouse;
-
Опыт построения CDC-пайплайнов с использованием Kafka и Debezium (или аналогичных инструментов) для потоковой репликации данных;
-
Высокий уровень владения SQL и опыт моделирования данных;
-
Опыт работы с DBT будет сильным преимуществом;
-
Уверенное владение Python для создания скриптов, ETL-задач и работы с API;
-
Опыт разработки и поддержки пайплайнов в Apache Airflow;
-
Опыт работы с PostgreSQL и/или MongoDB как источниками данных.
Работа в START - это:
-
Конкурентная заработная плата, годовая премия;
-
Полное соблюдение ТК РФ (оформление, оплата больничных, отпусков и пр.);
-
Классный, современный офис в шаговой доступности от метро Киевская;
-
Гибридный или удаленный формат работы и гибкое начало рабочего дня по согласованию с руководителем;
-
Рабочая техника, дополнительный монитор и прочие девайсы для комфортной работы;
-
Расширенная ДМС программа со стоматологией и страховка для выездов за рубеж;
-
Посещение профильных конференций;
-
Бесплатная подписка на сервис корпоративных скидок BestBenefits;
-
И, конечно же, подписка на START, доступная на пяти различных устройствах.