Data Engineer
Оценка ИИИзвестная компания с хорошей репутацией, востребованный стек технологий и возможность удаленной работы делают эту вакансию очень привлекательной для Middle-специалистов.
Сформировано ИИ автоматически. Не является проверкой вакансии или работодателя.
Сложность вакансии
Оценка ИИПозиция уровня Middle требует уверенного владения стеком Big Data (Hadoop, Spark) и понимания архитектуры ETL. Основная сложность может заключаться в масштабах данных, с которыми работает компания.
Сформировано ИИ автоматически. Не является проверкой вакансии или работодателя.
Анализ зарплаты
Оценка ИИЗарплата в объявлении не указана, но для Middle Data Engineer в Москве рыночный диапазон составляет от 200 000 до 350 000 рублей. Лига Цифровой Экономики обычно предлагает конкурентоспособные условия, соответствующие рынку.
Сформировано ИИ автоматически. Не является проверкой вакансии или работодателя.
Сопроводительное письмо
Составьте сопроводительное письмо под эту вакансию с вашим резюме
Описание вакансии
Требуется «Data Engineer» (Москва)
Компания «Лига Цифровой Экономики» ищет хорошего специалиста на вакансию «Data Engineer». Москва (Россия). Полный рабочий день. Можно удалённо. Требуемые навыки: , , , , , .
*👉*Откликнуться
Умный подбор, сопроводительные письма, советы по отказам — больше приглашений.
Навыки
- Apache Hadoop
- Apache Spark
- Apache Airflow
- ETL
- DWH
Возможные вопросы на собеседовании
Проверка понимания внутреннего устройства Spark для оптимизации производительности.
В чем разница между операциями Transformation и Action в Apache Spark? Приведите примеры.
Оценка навыков проектирования рабочих процессов.
Как вы организуете обработку ошибок и повторные запуски (retries) в DAG-файлах Apache Airflow?
Проверка опыта работы с распределенными системами хранения.
Какие форматы хранения данных (Parquet, Avro, ORC) вы предпочитаете использовать в Hadoop и почему?
Оценка архитектурного мышления.
Опишите ваш подход к обеспечению качества данных (Data Quality) при проектировании ETL-процесса.
Проверка навыков оптимизации запросов.
Что такое skew данных в Spark и какими способами можно бороться с этой проблемой при выполнении Join?
Сформировано ИИ автоматически. Не является проверкой вакансии или работодателя.
