Дата Инженер

Мы ищем Главного эксперта в отдел аудита корпоративного бизнеса.

Наша команда работает в Корпоративной аналитической платформе, хранящей петабайты данных и реализованной на широком стеке (HBase, Hadoop, GreenPlum), мы ежедневно обрабатываем беспрецедентные объемы данных.Обязанности разработка оптимизированных Spark-приложений для обработки больших объемов данных

Проектирование витрин данных для целей анализа и моделирования на стеке Hadoop/Greenplum

Перемещение больших объемов данных между HDFS и Greenplum

Исследование и подготовка данных

Проведение code-review

Внедрение инновационных технологий и методов аудита

Требования опыт работы с Hadoop: Apache Spark, HDFS, Hive

Глубокие знания SQL: понимание планов запроса, внутренней работы SQL-запросов, способов оптимизации запросов

Опыт работы с Python-стеком для работы с данными и API: Polars, Pandas, requests

Навыки работы в CLI

Опыт работы с OLAP базами данных (Greenplum/Clickhouse)

Понимание принципов работы распределённых систем

Знакомство с концепциями оптимизации хранения и доступа к данным (партиционирование, бакетирование)

Опыт работы с Git

Навыки работы с BI-системами: QlikSense/Superset

Приветствуются общее представление об ML/статистических моделях

Аналитический склад ума, ответственность, быстрая обучаемость, стрессоустойчивость, коммуникабельность, готовность работать в условиях ограниченного времени

Умение работать в режиме многозадачности

Готовность использовать ИИ в ежедневной работе

Условия гарантированный доход плюс премиальное вознаграждение

Гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ

ДМС с первого дня и льготное страхование для близких

Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров

Корпоративная пенсионная программа

Обучение за счет компании: онлайн курсы в Виртуальной школе Сбера, возможность получить новую квалификацию

Реферальная программа для сотрудников: можно пригласить в команду знакомых профессионалов и получить вознаграждение до 100 тыс.руб

Место работы: Санкт-Петербург Шафировский, 2