
Микрофинансовая организация KMF(КМФ)
Senior DWH разработчик
Не указана
- SQL
- Apache Airflow
- PostgreSQL
- Greenplum
- Apache Spark
- Apache NiFi
- ETL
- Python
- CI/CD
- Git
Что делать?
- Разработка и поддержка масштабируемых дата-пайплайнов с использованием PostgreSQL, Greenplum, Spark, Airflow и NiFi;
- Оптимизация хранения, обработки и извлечения больших объемов данных;
- Обеспечение качества, целостности и безопасности данных;
- Сотрудничество с дата-сайентистами и аналитиками для поддержки аналитики и отчетности;
- Мониторинг и улучшение ETL-процессов для повышения производительности и надежности;
- Внедрение практик CI/CD для дата-инфраструктуры.
Если у вас:
- 5+ лет опыта в дата-инжиниринге;
- Экспертиза в PostgreSQL и Greenplum для проектирования и оптимизации баз данных;
- Владение Apache Spark для обработки больших данных;
- Опыт работы с Apache Airflow для оркестрации процессов;
- Практические знания Apache NiFi для интеграции данных и ETL;
- Уверенные навыки программирования на Python;
- Понимание моделирования данных, хранилищ данных и оптимизации SQL;
- Опыт работы с инструментами CI/CD и системами контроля версий (например, Git).