Аналитик/инженер данных в команду Business DWH

Хранилище данных ВКонтакте (DWH) — это больше 1000 ETL‑процессов и свыше 40 петабайт данных.

Мы продуктово направленная команда внутри отела DWH. Помогаем запускать и развивать бизнес‑инициативы по всему ВКонтакте.

Задачи

• Сопровождение аналитики нового и дополнительного функционала систем

Наша команда — точка входа для продуктовой аналитики. К нам приходят с идеями и вопросами по данным, и надо вести инициативы под ключ: от сбора требований до результата.

Мы не просто выполняем задачи аналитиков, мы участвуем во всех этапах обсуждений и можем повлиять на бизнес.

Наши проекты крупные и амбициозные. Два года подряд выиграли корпоративную премию «Перспектива VK».

• Проектирование, прототипирование и разработка витрин данных и ETL‑процессов

Нужно будет продумывать витрины, собирать данные из разных источников, учитывать ограничения систем и краевые случаи.

Мы часто экспериментируем. Внедряем новые методологии и инструменты. Можем влиять на развитие технологий всего VK.

• Формирование модели данных

Мы в процессе внедрения модели данных. Есть возможность повлиять на весь процесс.

• Управление документацией и качеством данных

Хотим, чтобы данные были не чёрным ящиком, а нормальным инструментом: описаны, понятны, с проверками и мониторингами.

Требования

• опыт работы аналитиком/системным аналитиком/инженером данных от 3 лет
• умение выявлять и декомпозировать бизнес‑требования
• уверенный SQL
• Python для инженерных задач и автоматизации

Будет плюсом

• проектировали и развивали крупные хранилища данных
• знакомы с YTsaurus / Hadoop
• использовали ClickHouse