Perfomance Apache Spark (Scala/java) Developer

Привет!

Мы — ООО «Датаномика», решаем проблемы структурирования разнородных данных, которые сложно поддаются анализу, помогаем среднему и малому бизнесу, банкам, ритейлу использовать данные чеков для оценки конъюнктуры спроса и экономических показателей, помогаем банкам повысить качество сервиса финансового планирования и аналитики для клиентов.

1. О проекте:

Прикладная аналитическая платформа в топовом Банке РФ — это решение, позволяющее создавать аналитические витрины на Облаке Данных по различным направлениям бизнеса.

Синергия в продуктах и сервисах на основе клиентских путей, каждодневное предвосхищение потребностей клиента и формирование целостного предложения для сегментов от Банка как экосистемы — ключевая задача нашей команды.

Мы занимаемся разработкой нового прикладного фреймворка для команд, занимающихся разработкой витрин данных.

Обязанности:

• Разработка нового функционала;
• Проведение нагрузочного тестирования алгоритмов обработки данных (Spark Performance SQL Tuning);
• Рефакторинг текущих неэффективных решений;
• Осуществление архитектурного надзора реализации технических решений;
• Проектирование архитектуры фреймворка;
• Оптимизация производительности и масштабируемости сервисов;
• 50/50 будет заниматься нагрузочным тестированием и разработкой нового функционала

Требования:

• Опыт работы с любой из баз данных (Oracle, PostgreSQL, ClickHouse, Greenplum) и Hadoop (Hive, Spark, Flink);
• Опыт работы со Scala или Java (Big Data);
• Знание ООП, функционального программирования, GIL и т.д.
• Опыт оптимизации сложных запросов, версионности данных, механизмов time-travel, MVCC;
• Опыт проектирования архитектуры DWH сервисов, ролевой модели;

Будет плюсом:

Опыт работы дата-инженером от 3 лет.

Мы предлагаем:

• Работа в ИТ-аккредитованной компании
• Формат работы: офисный/гибрид (офисы: Москва)
• Гибкий график работы
• Официальная «белая» зарплата
• Оформление с первого рабочего дня, полное соблюдение ТК РФ
• Интересные, амбициозные задачи с достижимым результатом
• Достаточную свободу действий, инструментарий и необходимые ресурсы
• Регулярное обучение и профильные конференции за счёт компании, современное оборудование для работы.