Holocron — команда, которая отвечает за инфраструктуру данных в 2ГИС. Мы строим и поддерживаем системы, через которые проходят события от боевых сервисов до аналитических витрин, обеспечиваем надёжную доставку данных, их хранение, обработку и доступ для всех, кто с ними работает.
Сейчас мы развиваем корпоративную дата‑платформу нового поколения. Это не просто перенос пайплайнов — это переосмысление архитектуры, техстека и подходов. Мы отказываемся от легаси, сохраняем лучшее (например, Apache Spark) и закладываем фундамент, на котором будут работать десятки инженерных команд.
Задачи
- Расширять существующие форматы данных.
- Разрабатывать и поддерживать ETL/ELT‑процессы.
- Автоматизировать batch‑расчёты.
- Подключать новые источники данных.
- Участвовать в миграции пайплайнов с Hadoop/HDFS на новую архитектуру (S3, Kafka, Spark, ClickHouse).
- Работать с большими объёмами данных и высоконагруженными Kafka‑топиками.
Почему это интересно
- Ты участвуешь в создании дата‑платформы с нуля — от архитектуры до продакшена.
- Влияешь на технологический курс всей компании.