В рамках создания Единого Семантического слоя в Банке мы разрабатываем дата-продукты для поставки данных из исходных мастер-систем в корпоративное хранилище. Данные используются для формирования регуляторной, налоговой и обязательной отчётности в соответствии с требованиями регулятора и ЦБ.
Обязанности
- создание дата-продуктов и витрин данных на основании требований заказчиков
- разработка инкрементов в физическую и логическую модели данных
- поддержка актуальности и своевременности поставок данных
- формирование проверок качества данных
- разработка скриптов для трансформации данных
- разработка ETL процессов на основании Spark(JVM)
- мониторинг и анализ логов отработки ETL-процессов
- расследование и устранение инцидентов в своих дата-продуктах
- участие в архитектурных комитетах и экспертных группах
Требования
- опыт в роли аналитика данных от 3-х лет
- опыт работы в экосистеме Hadoop (HDFS, Hive) от 2-х лет
- уверенное знание SQL: сложные запросы, аналитически функции, понимание физической реализации join’ов, оптимизация производительности запросов
- опыт разработки ETL-процессов (партиционирование, секционирование, работа с временными рядами)
- знание одного или нескольких языков программирования: Java, Python на уровне переменных, процедур, функций, циклов, условных операторов
- понимание принципов организации хранилищ данных, подходов к проектированию логической и физической моделей, понимание основной проблематики хранилищ и подходов к решению
- инструменты командной работы: владение системами контроля версий (Git), участие в код-ревью
Будет плюсом:
- навыки работы с SAP PowerDesigner
- проектирование: навыки моделирования данных (знакомство с подходами Data Vault, Dimensional Modeling) и проектирования высоконагруженных систем
Условия
- комфортный современный офис рядом с м. Кутузовская
- ежегодный пересмотр зарплаты и годовую премию
- корпоративный спортзал и зоны отдыха
- уникальная система обучения Сбера для профессионального и карьерного развития
- расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
- подписка Прайм с возможностью совместного использования на трёх близких
- скидки на продукты компаний-партнеров
- вознаграждение за рекомендацию друзей в команду Сбера.
