Страна: Россия
Зарплата: 270 000 ₽ – 300 000 ₽

+500% приглашений

Откликайтесь
на вакансии с ИИ

SeniorВ офисеПолная занятость

Senior Data Engineer

Name: Quick Offer — сервис для поиска работы на hh.ru
Brand: Quick Offer
SKU: quick-offer-saas
Availability: InStock
Rating: 4.9 (682 reviews)

Сильная вакансия от известного интегратора с четкими требованиями и конкурентной зарплатой. Офисный формат может быть минусом для некоторых, но локации в крупных городах компенсируют это.

Вакансия из Quick Offer Global, списка международных компаний

Пожаловаться

Сложность вакансии

ЛегкоСложно

Высокая сложность обусловлена требованием глубокой экспертизы в Spark (от 4-5 лет) и необходимостью владения широким стеком (Hadoop, ClickHouse, SQL), а также готовностью работать с Java.

Анализ зарплаты

Медиана320 000 ₽

Рынок250 000 ₽ – 450 000 ₽

Предложенная зарплата (270-300к) находится в рамках рыночного медианного значения для Senior Data Engineer в России, хотя верхняя планка рынка для этой роли может достигать 400-450к в продуктовых компаниях.

Меня заинтересовала вакансия Senior Data Engineer в компании Cinimex. Мой многолетний опыт работы с Apache Spark и экосистемой Hadoop позволяет мне эффективно решать задачи по оптимизации ETL-пайплайнов и проектированию сложных потоков данных. Я обладаю глубокими знаниями SQL и ClickHouse, что критично для работы с высоконагруженными системами.

Особенно меня привлекает возможность работы в крупном системном интеграторе, где требуется не только техническая экспертиза, но и готовность осваивать новые инструменты, такие как Java для Spark. Уверен, что мои навыки оптимизации shuffle-операций и настройки памяти помогут вашей команде повысить производительность текущих решений. Буду рад обсудить мой опыт на собеседовании.

+250% к просмотрам

Составьте идеальное письмо к вакансии с ИИ-агентом

Откликнитесь в CINIMEX уже сейчас

Присоединяйтесь к команде Cinimex и реализуйте свой потенциал в масштабных проектах по обработке данных!

Описание вакансии

*💻 Senior Data Engineer*

270 000 —‍ 300 000 ₽

Офис (Москва, Санкт-Петербург, Нижний Новгород)

Cinimex — разработчик ПО и системный интегратор.

Требования:

– Глубокий экспертный опыт работы с Apache Spark от 4-5 лет (оптимизация джобов, работа с широкими и узкими зависимостями, настройка памяти и shuffle-операций);

– Опыт работы с ClickHouse;

– Опыт работы с Hadoop (HDFS, Hive);

– Опыт проектирования и разработки потоков данных, алгоритмов загрузки и обработки данных;

– Опыт оптимизации ETL-пайплайнов и SQL кода;

– Продвинутые знания SQL;

– Готовность осваивать Java для использования Spark.

*➡️*Откликнуться

*📍 Навигация:[База знаний](https://t.me/dsproglib) • [Задачи](https://t.me/ds_problems_lib) •* Собеседования

+400% к собеседованиям

Создайте идеальное резюме с помощью ИИ-агента

Навыки

SQL
Apache Spark
Hadoop
Java
ETL
Hive
HDFS
ClickHouse

Возможные вопросы на собеседовании

Вакансия требует глубокого понимания Spark. Вопрос проверяет умение бороться с перекосом данных.

Как вы будете диагностировать и устранять проблему Data Skew в Spark-приложении?

ClickHouse — ключевой инструмент в стеке. Важно понимать специфику движков таблиц.

В каких случаях вы выберете движок ReplacingMergeTree вместо обычного MergeTree в ClickHouse?

Оптимизация — одна из основных задач роли.

Расскажите о вашем опыте оптимизации shuffle-операций. Какие параметры конфигурации Spark вы изменяли в первую очередь?

Проверка архитектурного мышления.

Как спроектировать ETL-процесс, обеспечивающий идемпотентность при повторных запусках?

В описании указана готовность осваивать Java. Вопрос проверяет понимание разницы в контексте Spark.

В чем основные отличия и потенциальные преимущества использования Spark на Java/Scala по сравнению с PySpark?

Устали искать работу? Мы найдём её за вас

Quick Offer улучшит ваше резюме, подберёт лучшие вакансии и откликнется за вас. Результат — в 3 раза больше приглашений на собеседования и никакой рутины!

Россияот 270 000 ₽