Микрофинансовая организация KMF(КМФ)

Senior DWH разработчик

Не указана
  • Алматы
  • Полная занятость
  • Полный день
  • От 3 до 6 лет
  • SQL
  • Apache Airflow
  • PostgreSQL
  • Greenplum
  • Apache Spark
  • Apache NiFi
  • ETL
  • Python
  • CI/CD
  • Git
Что делать?
  • Разработка и поддержка масштабируемых дата-пайплайнов с использованием PostgreSQL, Greenplum, Spark, Airflow и NiFi;
  • Оптимизация хранения, обработки и извлечения больших объемов данных;
  • Обеспечение качества, целостности и безопасности данных;
  • Сотрудничество с дата-сайентистами и аналитиками для поддержки аналитики и отчетности;
  • Мониторинг и улучшение ETL-процессов для повышения производительности и надежности;
  • Внедрение практик CI/CD для дата-инфраструктуры.

Если у вас:

  • 5+ лет опыта в дата-инжиниринге;
  • Экспертиза в PostgreSQL и Greenplum для проектирования и оптимизации баз данных;
  • Владение Apache Spark для обработки больших данных;
  • Опыт работы с Apache Airflow для оркестрации процессов;
  • Практические знания Apache NiFi для интеграции данных и ETL;
  • Уверенные навыки программирования на Python;
  • Понимание моделирования данных, хранилищ данных и оптимизации SQL;
  • Опыт работы с инструментами CI/CD и системами контроля версий (например, Git).

​​