Middle Data Engineer
ForteBank
AI assistant
Job Description
Обязанности:
- Разработка и сопровождение ETL/ELT-процессов и потоков обработки данных (Batch / Real-Time).
- Разработка и оптимизация SQL-запросов, процедур и аналитических витрин в DWH.
- Участие в развитии архитектуры DWH, моделировании данных и оптимизации хранения.
- Разработка и сопровождение интеграций с использованием Kafka, NiFi, CDC и REST API.
- Разработка Python-скриптов для обработки данных, автоматизации и интеграций.
- Мониторинг, диагностика и оптимизация процессов загрузки и обработки данных.
- Обеспечение качества данных, участие в Code Review и CI/CD.
Требования:
- Опыт работы в Data Engineering / DWH от 3 лет.
- Уверенное знание SQL и опыт работы с Greenplum, PostgreSQL или Oracle.
- Понимание архитектуры DWH, принципов моделирования данных, ETL/ELT и MPP.
- Опыт разработки ETL-процессов (Informatica PowerCenter, Airflow или аналоги).