Data engineer

О вакансии

Обязанности: • разработка DWH/DataLake/LakeHouse • построение поставки данных в Batch • оптимизация sparkовых джоб • разработка и валидация архитектуры данных Требования • отличное знание SQL (join, CTE, оконные функции, фреймы и др.) • опыт работы с Hadoop, Spark, Iceberg • опыт работы с оркестраторами (например, Airflow) и CI/CD • практическое знание Python (можно Scala) на уровне разработки ETL • практический опыт разработки промышленных ETL потоков Условия офисный формат работы (Кутузовская) годовой бонус и ежегодный пересмотр зарплаты расширенный ДМС с первого дня и льготное страхование для семьи корпоративный университет Сбера, внутренн…