Middle+ Data Engineer

Наша команда развивает масштабируемую платформу данных. Мы считаем метрики по процессам сопровождения всего банка, предоставляем аналитику и управленческую отчётность, а также готовим дата-продукты, которые потребляет множество подразделений банка. Ищем человека, который готов организовывать оптимальную работу с данными, развивать архитектуру, внедрять новые технологии и актуальные концепции для хранения данных, принимать участие в разработке и готов быть наставником для младших сотрудников. Наш текущий стек: PostgreSQL, Greenplum, Apache, NiFi, Airflow, Kafka, Python Сейчас фокус на поставке NRT данных для AI агентов и ускорении работы с витринами данных путём внедрения Greenplum и Airflow. Первый этап отбора на эту вакансию – общение с AI-рекрутером. После отклика вам на почту придет приглашение пройти первичное интервью с ГигаРекрутером в Telegram. Диалог займёт примерно 10 минут. Его задача — уточнить недостающие детали и ускорить рассмотрение вашей кандидатуры. ГигаРекрутер только начинает свой путь, поэтому просим относиться с пониманием. Ваш опыт и участие помогут сделать его удобным и полезным!

• участие в проектировании и развитии архитектуры аналитического хранилища (30+ Тб)

• разработка и поддержка автоматизированных ETL/ELT процессов (создание интеграционного взаимодействия с источниками данных, настройка регулярных загрузок данных, NRT потоков)

• улучшение отказоустойчивости, мониторинга, алертинга и качества данных

• миграция DWH на целевую архитектуру

• сбор, обработка и парсинг "сырых" данных

• поддержка и развитие хранилища данных, оптимизация работы БД.

Будет плюсом:

• уверенные знания SQL (оконные функции, CTE, процедурный язык PostgreSQL/Greenplum)

• опыт работы с Airflow

• опыт работы с PostgreSQL/ Greenplum в качестве DE

• знание основных понятий и концепций из области Data Warehousing

• опыт разработки витрин данных

• опыт работы с Apache NiFi, Kafka

• опыт реализации и практического применения Data Vault

• навыки работы с генеративными AI-моделями.

• комфортный современный офис по адресу проезд 2-й Южнопортовый 12

• формат работы: офис на время адаптации и далее гибрид (2–3 дня в неделю в офисе)

• ежегодный пересмотр зарплаты, годовая премия

• корпоративный спортзал и зоны отдыха

• более 400 образовательных программ СберУниверситета для профессионального и карьерного развития

• расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа

• подписка Прайм с возможностью совместного использования на трёх близких

• вознаграждение за рекомендации друзей в команду Сбера.