Страна: Россия

+500% приглашений

Откликайтесь
на вакансии с ИИ

Гибрид

Инженер данных

Name: Quick Offer — сервис для поиска работы на hh.ru
Brand: Quick Offer
SKU: quick-offer-saas
Availability: InStock
Rating: 4.9 (682 reviews)

Известный бренд с четко прописанным современным стеком технологий. Гибридный формат работы в Санкт-Петербурге и фокус на инженерные практики делают вакансию привлекательной для опытных специалистов.

Вакансия из Quick Offer Global, списка международных компаний

Пожаловаться

Сложность вакансии

ЛегкоСложно

Роль требует глубоких знаний в экосистеме Hadoop и Apache Spark, а также опыта работы с Airflow. Высокая сложность обусловлена необходимостью оптимизации приложений и владения несколькими языками программирования (Python/Scala/Java).

Анализ зарплаты

Медиана280 000 ₽

Рынок180 000 ₽ – 380 000 ₽

Зарплата в объявлении не указана, но для позиции Data Engineer с таким стеком в Санкт-Петербурге рыночные показатели находятся в диапазоне от 200 до 350 тысяч рублей. Предложение будет конкурентоспособным, если попадет в этот интервал.

Меня заинтересовала вакансия Инженера данных в компании «Марс», так как мой опыт работы с Apache Airflow и оптимизацией Spark-приложений полностью соответствует вашим требованиям. Я обладаю глубоким пониманием принципов построения хранилищ данных и уверенно владею стеком Python и SQL, что позволит мне эффективно участвовать в развитии ваших пайплайнов обработки данных.

Кроме того, у меня есть опыт работы с экосистемой Hadoop и инструментами Apache Kafka, что упоминается в качестве преимущества. Я стремлюсь к внедрению лучших инженерных практик и оптимизации ресурсов, поэтому буду рад применить свои навыки для повышения производительности ваших систем и обмена опытом с командой.

+250% к просмотрам

Составьте идеальное письмо к вакансии с ИИ-агентом

Откликнитесь в Mars уже сейчас

Откликайтесь на вакансию Инженера данных в Марс, чтобы развивать современные хранилища данных и оптимизировать Spark-приложения!

Описание вакансии

🔥Инженер данных

Марс

Гибрид, СПб

Требования:

✅Опыт разработки пайплайнов обработки данных в Apache Airflow.

✅Опыт оптимизации приложений на Apache Spark.

✅Понимание работы СУБД и принципов построения хранилищ данных.

✅Опыт работы с Hadoop (Apache Spark, HDFS, YARN etc.).

✅Уверенное владение SQL, Python/Scala/Java.

Будет плюсом:

✅Опыт работы с Apache Kafka, Apache NiFi.

✅Наличие опыта оптимизации потребления ресурсов.

✅Готовность участвовать в развитии лучших инженерных практик внутри компании.

Откликнуться🔎

+400% к собеседованиям

Создайте идеальное резюме с помощью ИИ-агента

Навыки

Python
SQL
Apache Spark
Hadoop
Java
Apache Airflow
Apache Kafka
Apache NiFi
Scala
HDFS
YARN

Возможные вопросы на собеседовании

Проверка навыков оптимизации производительности в распределенных системах.

Расскажите о вашем опыте оптимизации Apache Spark приложений: какие техники вы использовали для борьбы с data skew?

Оценка практического опыта работы с оркестратором.

Как вы организуете обработку ошибок и повторные запуски (retries) в сложных DAG в Apache Airflow?

Проверка понимания архитектуры хранения данных.

В каких случаях вы предпочтете использование Parquet вместо Avro при проектировании хранилища на HDFS?

Оценка навыков работы с потоковыми данными.

Был ли у вас опыт интеграции Apache Kafka с Spark Streaming или Flink? Какие основные сложности возникали?

Проверка фундаментальных знаний SQL.

Опишите разницу между оконными функциями и группировкой: в каких сценариях оконные функции незаменимы для инженера данных?

Похожие вакансии

2 000 ₽ – 2 500 ₽

1000+ офферов получено

Устали искать работу? Мы найдём её за вас

Quick Offer улучшит ваше резюме, подберёт лучшие вакансии и откликнется за вас. Результат — в 3 раза больше приглашений на собеседования и никакой рутины!

Россия

Откликайтесьна вакансии с ИИ

Инженер данных

Анализ зарплаты

Сопроводительное письмо