Middle / Middle+ Data Инженер

Описание вакансии

ID 2608 - Middle / Middle+ Data Инженер

🌍 Локация: РФ/РБ (Строго по времени Мск)

💼 Удаленно

🕔 Занятость: фулл тайм

🏢 Проект: крупный ритейлер

💡 Требования:

• ETL/ELT пайплайны;
• Работа с API;
• Обработка больших объемов данных;
• SQL на продвинутом уровне: сложные join’ы, оконные функции, оптимизация запросов под большие объемы, понимание планов выполнения;
• Практический опыт работы (не «знаком», а делал в проде): Greenplum (понимание MPP, распределение данных, оптимизация), ClickHouse (построение витрин, работа с большими таблицами), MS SQL Server;
• Опыт работы с consumer/producer;
• Понимание семантики доставки и обработки сообщений;
• Уверенная работа с REST API (пагинация, ретраи, обработка ошибок);
• S3-совместимые хранилища: чтение/запись, организация данных, партиционирование;
• Важна самостоятельность и ответственность за результат.

Дополнительные требования

• Опыт работы с Trino (федеративные запросы, работа с несколькими источниками);
• Опыт построения DWH (staging / dds / marts);
• Понимание data lineage и контроля качества данных;
• Опыт orchestration (Airflow или аналоги).

📋Задачи:

• Разработка и поддержка пайплайнов загрузки и трансформации HR-данных;
• Интеграция источников (API, Kafka, БД, файловые хранилища);
• Построение витрин и обеспечение их консистентности;
• Оптимизация производительности и стоимости обработки данных;
• Обеспечение стабильности (обработка сбоев, ретраи, мониторинг).

📨 Оставить отклик можно по Откликнуться

❗️Пожалуйста, откликайтесь только при полном соответствии вакансии

❗️При отклике, указывайте, ID вакансии, ваш стек и прикладывайте резюме.

❗️Без ID вакансии отклики не будут рассматриваться

#Data #Engineer #Удаленно #вакансия