Data Engineer
Fido-Biznes
Job Description
Senior Data Engineer
Направление: Data Engineering / DWH / ETL
Уровень: Middle+ / Senior
Опыт работы: от 3 лет в Data Engineering или смежных направлениях.
Ищем Data Engineer для разработки и развития инфраструктуры обработки данных и корпоративного хранилища (DWH).
Специалист будет отвечать за построение ETL/ELT-процессов, интеграцию данных из банковских систем, автоматизацию загрузок, обеспечение качества и доступности данных.
Основные обязанности
-
Разработка процессов получения данных из Oracle через CDC (Debezium, Kafka, Kafka Connect).
-
Разработка и поддержка DAG в Apache Airflow для автоматизации загрузки и обработки данных.
-
Проектирование слоёв данных: Staging, исторические данные (SCD2), Data Marts.
-
Разработка и оптимизация ETL/ELT-процессов с использованием SQL и PL/SQL.
-
Интеграция данных из различных