Senior Data Engineer (B2C)

Мы команда Вероятностный Профиля. Формируем портрет неавторизованных пользователей Сбера и Компаний-Партнеров. Наша задача предполагает анализ цифровых следов на всех площадках Сбера и Партнеров, поэтому мы работаем с самой настоящей BigData - у нас самые тяжелые источники данных в Банке. Понимание того, что за клиент перед вами – одна из определяющих успешного Бизнеса, поэтому наше решение востребовано во всех сферах: от разметки датасетов смежных команд до антифрода и формирования персональных предложений. Основная задача при этом – помочь бизнесу правильно работать с неавторизованным клиентом в момент его входа на поверхность, поэтому мы не просто «перевариваем» очень большой поток данных, но и стремимся отдать результат Бизнесу как можно скорее.Обязанности Реализация и оптимизация пайплайнов работы с данными Настройка обработки потоков данных в реальном времени Мониторинг качества собираемых данных/ Требования Уверенное знание SQL(вложенные запросы, оконные функции, оптимизация запросов) Уверенное знание Scala или Java Опыт работы с экосистемой Hadoop(HDFS, HIVE, Apache Spark, Oozie) Опыт работы с DevOps инструментами- Git, Jenkins, SonarQube Опыт работы с технической проектной документацией – Бизнес-требования, Технические спецификации на разработку, Архитектура, User guide, Admin guide Желание развиваться в этой профессиональной области, работать в команде, проявлять инициативу и предлагать решения Будет плюсом: Знание Java, Python Опыт работы с Apache Flink, Apache Kafka, HBase. Опыт работы в agile, понимание принципов этой методологии и фреймворков Scrum, Kanban и т.д. Условия Комфортный современный офис рядом с м. Кутузовская ОФИСНЫЙ ФОРМАТ РАБОТЫ Ежегодный пересмотр зарплаты. Годовая премия Корпоративный спортзал и зоны отдыха Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития Программа адаптации и помощь руководителя на старте Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа Гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров Вознаграждение за рекомендацию друзей в команду Сбера.