Data Engineer (Due Diligence)

Ищем инженера по Дата-инженера в команду Due Diligence: анализ финансовой активности клиентов банка (юридические лица) в рамках кредитования, мониторинга, оценки рисков и других процессов банка. Работа команды позволяет выявлять негативные факторы деятельности компаний заемщиков в процессе кредитования. Результат нашей работы улучшает процесс для сотрудников Банка. Преимущественно, обработка больших данных и разработка витрин данных на Spark (Scala) с использованием pySpark. Базы данных PostgreSQL. Код храним в Bitbucket, DevOps трубы создаем на Jenkins.Обязанности: • анализ бизнес требований на разработку витрин • разработка промышленных витрин данных c использованием Hive, Spark и вывод их в ПРОМ.Требования: • опыт работы в области Data Engineer от одного года • знание SQL – продвинутый уровень (запросы, Join`ы, агрегаты, группировки, вложенные запросы) • знание python: стандартные структуры данных (dict, list, set, модуль collections), pandas, numpy, h5py • опыт работы с Hadoop (Hive, Spark, HBase) является плюсом • знание Git • опыт разработки витрин данных и выстраивания логического слоя данных • опыт работы с обработкой больших массивов данных • опыта по выводу витрин в промышленную эксплуатацию (подготовка документации, сопровождение процесса). Инструменты BigData: • Hadoop (Hive, Spark, Kafka, Oozie) • языки программирования (Scala, Python, Java) • инструменты DevOps (Git, Nexus, Jenkins).Условия: • офис в шаговой доступности от метро Кутузовская, отсутствие дресс-кода • никакой бюрократии, все не связанные с разработкой задачи выполняют выделенные роли в команде • полная свобода действий, важен результат • команда опытных инженеров • регулярное обучение hard и soft скиллам в нашем корпоративном университете • ДМС, страхование жизни, скидки для сотрудников, льготная ипотека от Сбербанка • регулярный пересмотр заработной платы в зависимости от результатов • бесплатный фитнес и тренажерный зал.