- Страна
- Россия
Откликайтесь
на вакансии с ИИ
Ведущий инженер по интеграции данных (EDW / Data Lake / Big Data)
Оценка ИИПозиция в одной из крупнейших ритейл-компаний (X5) с современным стеком технологий и серьезными масштабами данных. Четко прописанные обязанности и высокие требования указывают на профессиональную среду, хотя проект ограничен по срокам (май-июль 2026), что может быть связано с конкретным этапом внедрения.
Сложность вакансии
Оценка ИИРоль ведущего инженера предполагает не только глубокие технические знания стека Big Data (Hadoop, NiFi, Airflow), но и навыки архитектурного проектирования, а также управления процессами разработки (CI/CD, код-ревью). Высокая сложность обусловлена необходимостью решать задачи, с которыми не справляются другие участники команды.
Анализ зарплаты
Оценка ИИЗарплата в объявлении не указана. Для позиции ведущего инженера данных (Lead/Senior) в РФ рыночный диапазон составляет от 300 000 до 450 000 рублей в месяц в зависимости от глубины экспертизы в Big Data.
Сопроводительное письмо
Составьте идеальное письмо к вакансии с ИИ-агентом
Откликнитесь в Х5 уже сейчас
Присоединяйтесь к команде X5 для работы над масштабными проектами в области Big Data и EDW!
Описание вакансии
#vacancy #вакансия #Ведущийинженерпоинтеграцииданных
**Ведущий инженер по интеграции данных
(EDW / Data Lake / Big Data)**
Компания: Х5
Период: 01.05.2026 - 31.07.2026
Локация: РФ/РБ
Обязанности:
Самостоятельная разработка, реализация и поддержка интеграционных решений на стеке технологий, принятых в команде.
(Java, Groovy, Apache Nifi, Airflow)
Определение стека технологий для конкретных проектов и задач.
Решает технически сложные задачи, которые не могут решить другие инженеры в команде.
Оперативно реагирует на информацию о проблемах в зоне ответственности, выполняет задачи в установленные сроки.
Разрабатывает и контролирует актуальность документации по взаимодействию конфигурационных единиц платформы больших данных.
Предоставляет отчеты о своей деятельности начальнику отдела/руководителю в порядке, установленном руководством».
Контроль качества интеграционных решений с последующим созданием задач\дефектов для рефакторинга.
Определяет технологическую стратегию развития проекта или продукта, работает на перспективу.
Выстраивает процессы (например, CI/CD, код-ревью), внедряет и развивает инженерные практики.
Требования:
Владение одним из языков программирования (Java, Groovy), знание принципов ООП, умение читать чужой код.
Сборка проекта, компиляция и деплой в Rancher.
(Docker).
Опыт проектирования, реализации, развития и поддержки интеграционных решений на стеке технологий BigData.
Знание SQL (индексы, функции, умение читать планы запросов, оптимизация запросов).
Опыт работы с любой реляционной БД (Oracle, Postgres, MySQL, MsSQL, DB2 и т.п.).
Умение работать с Git в консоли.
Знание особенностей работы ETL-инструментов (Apache Nifi, Airflow, интеграционные шины SAP BW, Talend, Informatica, SAS и т.п.).
Опыт работы с Hadoop.
Понимание устройства HDFS, форматов данных.
Опыт работы с Hive или любым другим хранилищем на основе Hadoop.
Опыт использования систем ведения проектов и документации.
Умение работать с архитектурными схемами.
Понимание принципов построения и хранения данных — DWH и DataLake.
Желателен опыт администрирования Unix/Linux или Hadoop (HDFS, Yarn, Ranger, Spark, Zookeeper), Zabbix, Ansible.
телеграм для связи Откликнуться
Создайте идеальное резюме с помощью ИИ-агента
Навыки
- Git
- SQL
- CI/CD
- PostgreSQL
- Docker
- Airflow
- Hadoop
- Java
- MySQL
- ETL
- Oracle
- Ansible
- Apache NiFi
- Hive
- HDFS
- Zabbix
- Data Lake
- Groovy
- Rancher
- DWH
Возможные вопросы на собеседовании
Проверка понимания архитектуры и оптимизации в экосистеме Hadoop.
Расскажите о вашем опыте оптимизации Hive-запросов. Какие техники (partitioning, bucketing, выбор формата хранения) вы использовали для повышения производительности?
Оценка навыков работы с ключевым инструментом интеграции, указанным в вакансии.
С какими основными проблемами производительности в Apache NiFi вы сталкивались и как настраивали Backpressure и мониторинг потоков?
Проверка навыков проектирования сложных систем.
Опишите процесс выбора между использованием Airflow и NiFi для конкретной задачи интеграции. В каких случаях вы предпочтете один инструмент другому?
Оценка опыта в DevOps-практиках, критичных для данной позиции.
Как вы организовывали процессы CI/CD для ETL-пайплайнов и интеграционных решений в среде Docker/Rancher?
Проверка лидерских качеств и умения проводить код-ревью.
На что вы в первую очередь обращаете внимание при проведении код-ревью Java/Groovy кода в контексте обработки больших данных?
Похожие вакансии
Ведущий аналитик данных ALM
Ведущий разработчик хранилища данных (SQL)
Team lead команды аналитиков
Team Lead Data Quality
Ведущий аналитик данных
Ведущий экономист-аналитик Power BI (Power Query, Power Pivot)
1000+ офферов получено
Устали искать работу? Мы найдём её за вас
Quick Offer улучшит ваше резюме, подберёт лучшие вакансии и откликнется за вас. Результат — в 3 раза больше приглашений на собеседования и никакой рутины!