Middle Data Engineer в Holocron
Holocron — команда, которая отвечает за инфраструктуру данных в 2ГИС. Мы строим и поддерживаем системы, через которые проходят события от боевых сервисов до аналитических витрин, обеспечиваем надёжную доставку данных, их хранение, обработку и доступ для всех, кто с ними работает.
Сейчас мы развиваем корпоративную дата‑платформу нового поколения. Это не просто перенос пайплайнов — это переосмысление архитектуры, техстека и подходов. Мы отказываемся от легаси, сохраняем лучшее (например, Apache Spark) и закладываем фундамент, на котором будут работать десятки инженерных команд.
Задачи
- Расширять существующие форматы данных.
- Разрабатывать и поддерживать ETL/ELT‑процессы.
- Автоматизировать batch‑расчёты.
- Подключать новые источники данных.
- Участвовать в миграции пайплайнов с Hadoop/HDFS на новую архитектуру (S3, Kafka, Spark, ClickHouse).
- Работать с большими объёмами данных и высоконагруженными Kafka‑топиками.
Почему это интересно
- Ты участвуешь в создании дата‑платформы с нуля — от архитектуры до продакшена.
- Влияешь на технологический курс всей компании.
- Работаешь с современным стеком: Spark 3+, Kafka, S3, ClickHouse.
- Получаешь опыт, который сложно приобрести в рамках устоявшихся решений.
- Решаешь реальные технические вызовы: масштабируемость, отказоустойчивость, строгие SLA.
Требования
- Опыт работы с данными от уровня Middle и выше.
- Понимание принципов работы ETL/ELT‑процессов.
- Уверенное владение SQL, умение читать и разбирать сложные отчёты.
- Желательно знание Apache Spark, Kafka, ClickHouse.
- Навыки программирования на одном из языков — например, Scala или Python.
- Интерес к построению и развитию дата‑инфраструктуры.
Как мы работаем
- Не боимся убирать легаси — осознанно избавляемся от устаревших решений.
- Оцениваем эффективность не по количеству кода, а по бизнес‑ценности.
- Ценим нестандартные, но обоснованные инженерные решения.
- Стремимся к понятной архитектуре и human‑friendly документации.
- Умеем договариваться — и с бизнесом, и между собой.
Работа в 2ГИС
- 2ГИС — аккредитованная IT‑компания.
- Можно работать 100% удалённо или в офисах: Москва, Санкт‑Петербург, Новосибирск.
- Полностью «белая» зарплата, размер обсуждается индивидуально — потолка нет.
- Есть ДМС, штатный терапевт, невролог, мед.консультант и другие IT‑бонусы.
- Если хочешь делиться опытом — поддержим участие в конференциях и публикациях на Хабре.
А ещё мы проводим внутренние хакатоны, отмечаем значимые релизы и устраиваем масштабный фестиваль 2FEST для всего RnD. Делимся опытом на митапах и в подкастах, пишем про технологии на Хабре, а про новое в продуктах - на VC и Доставили, рассказываем о внутрянке в телеграм Dev2GIS, выступаем на CodeFest, HighLoad и многое другое.
