Job Description

Мы ищем сильного дата инженера, который умеет не только работать с готовыми данными, но и самостоятельно выстраивать весь процесс: от загрузки и трансформации до витрин, автоматизаций и контроля качества.

Вам предстоит:

Разработка и поддержка витрин данных.
Автоматизация процессов на Python и Airflow.
Написание и оптимизация сложных SQL-запросов.
Работа с большими объемами данных в Spark.
Загрузка данных в КХД из Excel, API и различных БД.
Перенос и объединение данных между разными системами и СУБД.
Проектирование структуры таблиц и архитектуры данных.
Разработка ad hoc автоматизаций и внутренних решений.
Настройка чекеров и Data Quality: полнота, дубли, freshness, аномалии, бизнес-правила.
Мониторинг загрузок, витрин и алертов при ошибках.

Что важно:

Сильный SQL и понимание оптимизации запросов.
Уверенный