Ищем разработчика в команду Digital Footprint Intelligence (TI / OSINT), который будет заниматься разработкой и поддержкой парсеров и внутренних решений.
Задачи:
Требования:
Задачи:
- Парсинг/скрейпинг различных ресурсов;
- Интеграция с различными API;
- Корректировка правил парсинга (XPath, регулярные выражения) в уже существующих решениях;
- Структуризация данных (написание конвертеров, автоматизация процесса обработки данных и т.д.);
- Разработка и поддержка систем мониторинга работоспособности внутренних решений.
Требования:
- Уверенные знания Python;
- Знание языка SQL;
- Опыт работы с Elasticsearch, RabbitMQ;
- Понимание регулярных выражений и языка XPath;
- Умение работать с различными форматами данных (XML, JSON);
- Опыт в Web Scraping (желателен опыт работы с Selenium/Pyppeteer/Playwright, PyAutoGUI);
- Опыт работы с ОС Linux (желателен опыт работы в направлении DevOps);
- Опыт в подходах CI/CD: Docker, Ansible, Kubernetes;
- Опыт работы с системами мниторинга: Grafana, Prometheus, Splunk;
- Понимание LLM.