Junior Data Engineer [Data Assistance, МТС Веб Сервисы]

МТС — это мультисервисная цифровая экосистема. Мы создаём и развиваем сервисы в сфере мобильной связи, больших данных, искусственного интеллекта, облачного хранения, медиа и финансов — все они делают жизнь людей проще и интереснее. Big Data – один из ключевых юнитов МТС. Наши технологии применяются практически во всех направлениях компании - финансы, маркетинг, обслуживание, планирование сети, HR, розница. Команда центра Big Data находится в поиске Junior Data Engineer в продукт Data Assistance. Data Assistance — внутренний сервис, который помогает командам без аналитического ресурса решать бизнес-задачи над данными из существующего ИТ-ландшафта компании, используя целевые инструменты MWS Data.

Задачи и обязанности

• Разрабатывать ETL-процессы для извлечения, очистки, трансформации и загрузки данных;
• Интегрировать новые источники данных в существующую архитектуру;
• Адаптировать и дорабатывать существующие процессы под изменяющиеся бизнес-требования;
• Писать и оптимизировать SQL-запросы для работы с большими объёмами данных;
• Участвовать в создании и поддержке витрин данных.

Требования

• Имеешь опыт работы с Apache Spark (фундаментальные концепции: RDD, DataFrame, transformations, actions);
• Уверенно пишешь SQL (JOIN, UNION, оконные функции, понимание реляционных БД);
• Знаешь основы Python (синтаксис, коллекции, функции);
• Понимаешь разницу между ETL и ELT, знаком с концепциями оркестрации (Airflow);
• Умеешь работать с Git (репозиторий, ветки, коммиты);
• Знаком с Hadoop-экосистемой (HDFS, YARN, Hive);
• Готов учиться и глубоко разбираться в задачах;
• Будет преимуществом: опыт с Kafka, Flink, Spark Streaming.

Условия

• Собственную платформу MTS Ocean для получения ИТ-ресурсов, а это значит, что деплой, мониторинг, observability - не будут для вас проблемой, вы сможете сосредоточиться на фичах;
• Профессиональные гильдии инженеров по направлениям, чтобы поддерживать друг друга и обмениваться опытом;
• Внутреннюю площадку TechTalks для обмена опытом, дискуссий, развития навыков самопрезентации.
• Участие во внешних IT конференциях. Мы выступаем на HighLoad++, DataFest, Mobius, Test Driven Conf, Joker, DevOps, Матемаркетинг и даже проводим собственную конференцию по архитектуре True Tech Arch;
• Полезные курсы и вебинары в корпоративном университете и электронные библиотеки;
• Медицинскую страховку с 1 месяца со 100% покрытием расходов, включая стоматологию, страхование жизни и здоровья в поездках за рубеж. А еще можно застраховать родственников с корпоративной скидкой;
• Единую подписку МТС Premium — KION light в онлайн-кинотеатре KION, сервис МТС Music, 30 дней бесплатного пользования подпиской OZON Premium;
• Скидки и предложения от партнеров на фитнес, занятия английским и прочее.