Data engineer Senior

Ключевая цель:
• Построение надежных, масштабируемых и поддерживаемых ETL/ELT-пайплайнов для аналитики и отчетности.

Обязательные требования:
• Опыт работы DE от 4 лет;
• Прочный навык работы с SQL (оптимизация запросов, работа с большими объемами данных);
• Практический опыт на одном из On-Premise решениями: Apache Airflow, Apache NiFi, SSIS, dbt;
• Программирование на Python (библиотеки: Pandas, PySpark, Airflow SDK) для задач обработки данных;
• Опыт моделирования данных для DWH (размерность/факты, SCD);
• Доменный опыт: Работа с данными из финансовых систем (планы-факты, транзакции), логистических систем (трекинг, заказы, данные датчиков IoT);
• Опыт работы со стриминговыми данными (Kafka, Spark Streaming);
• Знание контейнеризации (Docker) и оркестрации (Kubernetes);
• Опыт настройки мониторинга пайплайнов (алертинг, метрики).