Data Engineer (Middle/Senior) (Fintech)

#вакансия #dataengineer #удаленка

Вакансия: Data-инженер Middle+ — Senior+
Компания: 13tm
Формат: удаленно, фуллтайм
Гражданство, локация: РФ
ЗП: от 300к на руки

✨Требования:
• Опыт в инженерии данных, ETL-разработки от 5 лет (банковские КХД, витрины, интеграционные потоки, платформы данных).
• Для Senior+ не менее 7 лет, включая не менее 3 лет в роли технического лидера, ведущего инженера или руководителя инженерного направления
• Самостоятельная реализация и сопровождение пайплайнов для критичных бизнес-процессов
• Полный цикл поставки данных: источник → загрузка → трансформация → DQ → витрина → эксплуатация → исправление дефектов.
• Greenplum или другая MPP-СУБД: сложный SQL, оптимизация запросов, индексы, партиционирование, планы выполнения.
• Apache Spark: Spark SQL, DataFrame API, оптимизация (партиционирование, кэширование, broadcast join, диагностика производительности).
• Airflow или аналоги: разработка и поддержка ETL/ELT-пайплайнов, Git, CI/CD.
Python и/или Java для разработки пайплайнов, утилит, автоматизации и проверок качества.
• Проектирование слоев КХД, витрин и интеграций. Понимание нормализации, денормализации, схем звезда/снежинка, Data Vault 2.0.
• Реализация пайплайнов с учетом идемпотентности, повторного запуска, полноты и надежности загрузки.
• Сверки между источниками, слоями DWH и витринами. SQL-проверки полноты, согласованности и корректности данных.
• Мониторинг загрузок, алертинг по сбоям, анализ логов, расследование инцидентов и устранение причин дефектов.
• Опыт миграции данных между DWH-платформами (Oracle → Greenplum или аналоги).
• Управление схемами и миграциями (Liquibase или аналоги), версионирование данных.
Будет плюсом:
• Опыт редизайна КХД, модернизации платформы с измеримым эффектом.
• Разработка ETL-фреймворков и библиотек для команды.
• Настройка автоматического восстановления процессов.
• Менторство инженеров, формирование стандартов разработки.

📩Подробности: Показать контакты