yandex
Страна
Украина
+500% приглашений

Откликайтесь
на вакансии с ИИ

Ускорим процесс поиска работы
УдалённоПолная занятость

Big Data Engineer

ИИОценка ИИ

Интересный стек технологий (Scala, Spark, K8s) и работа с современными облачными платформами. Удаленный формат работы и фокус на сложных инженерных задачах делают вакансию привлекательной для опытных инженеров.


Вакансия из Quick Offer Global, списка международных компаний
Пожаловаться

Сложность вакансии

ЛегкоСложно
ИИОценка ИИ

Роль требует глубоких знаний Scala и Spark, а также опыта работы с облачными провайдерами и Kubernetes. Сложность обусловлена необходимостью поддержки высоконагруженных ETL-пайплайнов и работы с геоданными.

Анализ зарплаты

Медиана6 500 $
Рынок5 000 $ – 8 500 $
ИИОценка ИИ

Зарплата не указана в вакансии, но для позиции Senior Big Data Engineer в Европе и Украине рыночные показатели обычно находятся в диапазоне от $5000 до $8000 в месяц. Предлагаемая роль требует владения Scala, что часто оплачивается выше среднего по рынку.

Сопроводительное письмо

I am writing to express my strong interest in the Big Data Engineer position. With extensive experience in building and maintaining large-scale ETL pipelines using Scala and Spark, I am confident in my ability to contribute to your team's success in processing complex geo-location data. My background in distributed systems and hands-on expertise with Apache Airflow align perfectly with the requirements of this role.

Throughout my career, I have successfully deployed and managed data infrastructures on both AWS and GCP, leveraging Kubernetes for orchestration. I am particularly excited about the opportunity to work on a platform that handles extensive geo-location data, as I enjoy the unique challenges associated with high-volume spatial data processing. My technical skills, combined with my Upper-Intermediate English proficiency, allow me to collaborate effectively in international environments.

+250% к просмотрам

Составьте идеальное письмо к вакансии с ИИ-агентом

Составьте идеальное письмо к вакансии с ИИ-агентом

Откликнитесь в Commit Offshore уже сейчас

Присоединяйтесь к команде и создавайте масштабируемые ETL-платформы для работы с геоданными — отправьте свое резюме прямо сейчас!

Описание вакансии

🚀 Big Data Engineer (Remote)

📍Europe, Ukraine

We’re looking for a Big Data Engineer to join a growing team and help build and scale a complex ETL platform with extensive geo-location data processing.

Requirements:

◽️ Hands-on experience with Scala

◽️ Strong expertise in Spark / PySpark

◽️ Experience with Apache Airflow

◽️ Experience working with AWS and/or GCP

◽️ Knowledge of Kubernetes (K8s)

◽️ Experience building and maintaining large-scale ETL pipelines

◽️ Understanding of distributed systems and data processing architectures

◽️ Upper-Intermediate English or higher

📩 Откликнуться

+400% к собеседованиям

Создайте идеальное резюме с помощью ИИ-агента

Создайте идеальное резюме с помощью ИИ-агента

Навыки

  • Scala
  • Apache Spark
  • PySpark
  • Apache Airflow
  • AWS
  • GCP
  • Kubernetes
  • ETL

Возможные вопросы на собеседовании

Проверка практического опыта оптимизации Spark-приложений.

Расскажите о наиболее сложной проблеме производительности в Spark, с которой вы столкнулись, и как вы её решили?

Оценка навыков проектирования отказоустойчивых процессов.

Как вы организуете обработку ошибок и повторные запуски (retries) в сложных DAG в Airflow?

Проверка понимания специфики работы с геоданными.

Какие особенности и сложности возникают при обработке и хранении больших объемов гео-локационных данных?

Оценка опыта работы с контейнеризацией в контексте данных.

Каким образом вы настраивали мониторинг и управление ресурсами для Spark-джоб, запущенных в Kubernetes?

Проверка архитектурного мышления.

В каких случаях вы бы предпочли использование Scala вместо PySpark для разработки ETL-процессов и почему?

Похожие вакансии

NDA
160 000 ₽ – 220 000 ₽

Python разработчик (DWH/Data Engineering)

SeniorУдалённо
Python · SQL · PostgreSQL · ClickHouse · Apache Airflow · Kafka · Debezium · Docker · Kubernetes · Git · CI/CD · Apache Superset · Data Vault 2.0 · Apache Flink · Apache Spark
+15 навыков
NDA
1 900 ₽ – 2 000 ₽

Data Scientist Middle+, Senior

SeniorУдалённо
Python · SQL · PySpark · ETL · Scikit-learn · TensorFlow · PyTorch · Machine Learning · Data Science · Feature Engineering · Spark MLlib · Pandas
+12 навыков
J
JETLYN
270 000 ₽ – 330 000 ₽

Data Scientist

SeniorУдалённо
Python · SQL · PySpark · ETL · Scikit-learn · TensorFlow · PyTorch · Spark MLlib · Feature Engineering · Machine Learning · Time Series
+11 навыков
OS
Omega Solutions
150 000 ₽ – 250 000 ₽

Middle+ Data инженер

SeniorУдалённо
SQL · Python · Pandas · NumPy · Airflow · PostgreSQL · ETL
+7 навыков
О«
ООО «Образовательные продукты Русяева»
180 000 ₽ – 250 000 ₽

Backend / ML Infrastructure / MLOps инженер

MiddleУдалённо
Python · TypeScript · PostgreSQL · Qdrant · RAG · LLM · S3 · Sentry · MLOps · Vector Search
+10 навыков
N
Nedvision.ai
от 100 000 ₽

Junior Applied ML Engineer / Data Scientist

JuniorУдалённо
Python · Pandas · NumPy · SQL · Machine Learning · EDA · Feature Engineering · Statistics · Scikit-learn · CatBoost · LightGBM · XGBoost · NLP · geopandas · Airflow · MLflow
+16 навыков
более 1000 офферов получено
4.9

1000+ офферов получено

Устали искать работу? Мы найдём её за вас

Quick Offer улучшит ваше резюме, подберёт лучшие вакансии и откликнется за вас. Результат — в 3 раза больше приглашений на собеседования и никакой рутины!

Украина