yandex
Страна
Украина
+500% приглашений

Откликайтесь
на вакансии с ИИ

Ускорим процесс поиска работы
УдалённоПолная занятость

Big Data Engineer

ИИОценка ИИ

Интересный стек технологий (Scala, Spark, K8s) и работа с современными облачными платформами. Удаленный формат работы и фокус на сложных инженерных задачах делают вакансию привлекательной для опытных инженеров.


Вакансия из Quick Offer Global, списка международных компаний
Пожаловаться

Сложность вакансии

ЛегкоСложно
ИИОценка ИИ

Роль требует глубоких знаний Scala и Spark, а также опыта работы с облачными провайдерами и Kubernetes. Сложность обусловлена необходимостью поддержки высоконагруженных ETL-пайплайнов и работы с геоданными.

Анализ зарплаты

Медиана6 500 $
Рынок5 000 $ – 8 500 $
ИИОценка ИИ

Зарплата не указана в вакансии, но для позиции Senior Big Data Engineer в Европе и Украине рыночные показатели обычно находятся в диапазоне от $5000 до $8000 в месяц. Предлагаемая роль требует владения Scala, что часто оплачивается выше среднего по рынку.

Сопроводительное письмо

I am writing to express my strong interest in the Big Data Engineer position. With extensive experience in building and maintaining large-scale ETL pipelines using Scala and Spark, I am confident in my ability to contribute to your team's success in processing complex geo-location data. My background in distributed systems and hands-on expertise with Apache Airflow align perfectly with the requirements of this role.

Throughout my career, I have successfully deployed and managed data infrastructures on both AWS and GCP, leveraging Kubernetes for orchestration. I am particularly excited about the opportunity to work on a platform that handles extensive geo-location data, as I enjoy the unique challenges associated with high-volume spatial data processing. My technical skills, combined with my Upper-Intermediate English proficiency, allow me to collaborate effectively in international environments.

+250% к просмотрам

Составьте идеальное письмо к вакансии с ИИ-агентом

Составьте идеальное письмо к вакансии с ИИ-агентом

Откликнитесь в Commit Offshore уже сейчас

Присоединяйтесь к команде и создавайте масштабируемые ETL-платформы для работы с геоданными — отправьте свое резюме прямо сейчас!

Описание вакансии

🚀 Big Data Engineer (Remote)

📍Europe, Ukraine

We’re looking for a Big Data Engineer to join a growing team and help build and scale a complex ETL platform with extensive geo-location data processing.

Requirements:

◽️ Hands-on experience with Scala

◽️ Strong expertise in Spark / PySpark

◽️ Experience with Apache Airflow

◽️ Experience working with AWS and/or GCP

◽️ Knowledge of Kubernetes (K8s)

◽️ Experience building and maintaining large-scale ETL pipelines

◽️ Understanding of distributed systems and data processing architectures

◽️ Upper-Intermediate English or higher

📩 Откликнуться

+400% к собеседованиям

Создайте идеальное резюме с помощью ИИ-агента

Создайте идеальное резюме с помощью ИИ-агента

Навыки

  • AWS
  • GCP
  • Kubernetes
  • PySpark
  • Apache Spark
  • ETL
  • Apache Airflow
  • Scala

Возможные вопросы на собеседовании

Проверка практического опыта оптимизации Spark-приложений.

Расскажите о наиболее сложной проблеме производительности в Spark, с которой вы столкнулись, и как вы её решили?

Оценка навыков проектирования отказоустойчивых процессов.

Как вы организуете обработку ошибок и повторные запуски (retries) в сложных DAG в Airflow?

Проверка понимания специфики работы с геоданными.

Какие особенности и сложности возникают при обработке и хранении больших объемов гео-локационных данных?

Оценка опыта работы с контейнеризацией в контексте данных.

Каким образом вы настраивали мониторинг и управление ресурсами для Spark-джоб, запущенных в Kubernetes?

Проверка архитектурного мышления.

В каких случаях вы бы предпочли использование Scala вместо PySpark для разработки ETL-процессов и почему?

Похожие вакансии

более 1000 офферов получено
4.9

1000+ офферов получено

Устали искать работу? Мы найдём её за вас

Quick Offer улучшит ваше резюме, подберёт лучшие вакансии и откликнется за вас. Результат — в 3 раза больше приглашений на собеседования и никакой рутины!

Украина