В компанию Тера Интегро, входящую в состав Группы Аренадата, открыта позиция Архитектора решений в связи с появлением нового проекта миграции аналитических платформ заказчика на продукты Arenadata.
Что нужно делать:
- Проектирование системы, разработка и согласование архитектурных документов, разработка ETL-фреймворка и оркестратора.
- Проектирование и разработка механизмов репликации данных между ADB, S3, ADQM.
- Разработка репликации слоев данных. Миграция расчета слоя.
- Разработка механизмов внутри-системных проверок: db constraints, типов данных, технических- и бизнес-проверок, витрин, дэшбордов.
- Разработка механизмов кросс-системных сверок.
- Проектирование и разработка механизмов загрузки истории.
- Проектирование и разработка механизмов мониторинга тракта загрузки данных.
- Проектирование и разработка механизмов мониторинга ADB и ADQM.
- Загрузка истории, запуск инкрементального расчета, кросс-системные сверки и исправление ошибок по слоям.
- Тестирование интеграций и проведение ПСИ с потребителями. Подготовка документации. Разработка ПМИ, проведение ПСИ.
- Лидирование команды разработчиков. Менторинг и контроль выполнения задач.
Мы ждём, что вы:
- Опыт архитектурного проектирования хранилищ и озер данных в крупных компаниях.
- Опыт проектирования миграций сложных корпоративных аналитических платформ на отечественные продукты (платформа, оркестрация, слои данных, контроль качества данных и др). Опыт миграций (импортозамещения) с продуктов западных вендоров на Arenadata/OSS.
- Опыт написания sql скриптов, хранимых процедур Greenplum/PostgreSQL.
- Понимание особенностей ADB/Greenplum. Опыт работ с ADQM/Clickhouse.
- Опыт разработки и проектирования ETL/ELT процессов.
- Опыт оптимизаций запросов.