Datanomica

Data Engineer Hadoop

До 173 500 RUR
  • Москва
  • Полная занятость
  • Полный день
  • От 1 года до 3 лет
  • Hadoop
  • SQL

Привет!

Мы - ООО «Датаномика», решаем проблемы структурирования разнородных данных, которые сложно поддаются анализу, помогаем среднему и малому бизнесу, банкам, ритейлу использовать данные о клиентах для оценки конъюнктуры спроса и экономических показателей, помогаем повысить качество сервиса финансового планирования и аналитики для клиентов.

О проекте:

Проект реализации базовых витрин для брокерского обслуживания в крупном российском банке

Что входит в задачи:

  • Разработка ETL процессов на стеке Hadoop;
  • Разработка базовых витрин данных для брокерского обслуживания;
  • Проведение тестирования на тестовых стендах перед передачей аналитику.

Требования:

  • Опыт работы в роли разработчика за последние 2 (два) года в проектах по разработке и/или модификации и/или внедрению ПО с использованием инструментов и технологий Hadoop;
  • Опыт работы с указанными инструментами по направлению Hadoop: HDFS, MapReduce, Yarn, Hadoop Common, Apache Tez, Apache Solr, Apache Pig, Sqoop и/или Flume, Apache Hive и/илиSpark SQL, Apache Kafka;
  • Опыт работы с реляционными БД (Oracle DB и/или PostgreSQL и/или MySQL);
  • Опыт оптимизации производительности SQL запросов (план запроса, индексы, дистрибуция, full scan);
  • Опыт работы с инструментами машинного обучения Apache Mahout и/или Apache Spark MLLib;
  • Опыт разработки API (REST);
  • Опыт участия в оптимизации процессов сбора, первичная обработка и хранение большого объема данных из различных типов источников;
  • Опыт интеграции инфраструктурных компонент c сторонними системами;
  • Опыт оптимизации моделей хранения данных;
  • Опыт командной разработки с использованием программных продуктов Confluence и Jira;
  • Опыт работы, как в каскадных (waterfall), так и в гибких методологиях (Agile и/или DevOps и/или Scrum) разработки.

Мы предлагаем:

  • Работа в ИТ-аккредитованной компании;
  • Регулярное обучение и профильные конференции за счёт компании, современное оборудование для работы;
  • Гибридный формат работы;
  • Гибкий график работы;
  • Официальная «белая» зарплата;
  • Оформление с первого рабочего дня, полное соблюдение ТК РФ;
  • Интересные, амбициозные задачи с достижимым результатом;
  • Достаточную свободу действий, инструментарий и необходимые ресурсы.