Инженер сопровождения инфраструктуры Data (NRT)

Сейчас мы ищем инженера сопровождения 3L на одно из направлений разработки Data. Команда занимается поддержкой Data продуктов, тесно взаимодействуя с разработчиками и аналитиками.

От успешного соискателя мы ожидаем:

• Базовых знаний SQL;
• Опыта работы с Airflow;
• Опыта работы с Clickhouse;
• Опыта настройки мониторинга/алертинга в Grafana;
• Опыта работы с Git.

Будет плюсом:

• Знание Python или другого ЯП;
• Опыт чтения/написания кода scala/spark;
• Опыт работы с Active Directory;
• Опыт работы с S3;
• Понимание принципов работы Kafka;
• Знание BI-инструментов;
• Умение работать с REST API;
• Опыт работы с NoSQL СУБД.

Чем предстоит заниматься:

• Проверять и подтверждать наличие проблем в сервисах NRT;
• Решать инциденты с витринами данных в Clickhouse;
• Решать инциденты с потоками данных от источников до хранилища;
• Разбираться в логах сервисов и анализировать ошибки;
• Анализировать потребление ресурсов сервисами и вносить изменения в конфигурации;
• Настраивать алертинг и новые дашборды мониторинга;
• Поддерживать документацию в актуальном состоянии;
• Помогать командам разработки в решении типовых задач и проблем.

Стек:

• S3, Cassandra, Hadoop;
• Clickhouse, Greenplum;
• Kafka;
• Spark, Java, Python;
• Airflow, Jenkins;
• Grafana, VictoriaMetrics;
• Jira, Confluence.