- Страна
- Россия
- Зарплата
- до 245 000 ₽
Откликайтесь
на вакансии с ИИ
Data Engineer / Big Data Developer
Оценка ИИХорошее предложение для Middle+ специалистов с четким стеком технологий и возможностью удаленной работы. Проект миграции — это всегда ценный опыт в портфолио, хотя проектная занятость (от 5 месяцев) может быть менее стабильной, чем бессрочный контракт.
Сложность вакансии
Оценка ИИПозиция требует глубоких знаний как традиционных СУБД (Oracle, Postgres), так и Big Data стека (Hadoop, Spark, Greenplum). Основная сложность заключается в специфическом опыте миграции ETL-систем и оптимизации SQL под Highload.
Анализ зарплаты
Оценка ИИПредложенная зарплата до 245 000 ₽ соответствует среднерыночным показателям для Middle+ Data Engineer в России, хотя для Senior-уровня в Big Data сегменте верхняя планка может быть выше.
Сопроводительное письмо
Составьте идеальное письмо к вакансии с ИИ-агентом
Откликнитесь уже сейчас
Отправьте свое резюме напрямую рекрутеру в Telegram, чтобы принять участие в масштабном проекте миграции на Apache-стек!
Описание вакансии
*🔥* Data Engineer / Big Data Developer | Middle+
*💰* До 245 000 ₽
*🌍* Удалённо по РФ
*🕐* Full-time, МСК ± 2 часа
*⏳* Проект от 5 месяцев с возможностью продления
*👥* Ищем 3 специалистов
Ищем Data Engineer на проект по миграцииш информационных систем на Apache-стек.
*❗️*Критично:
— опыт миграции ETL-систем
— глубокий SQL: оконные функции, сложные JOIN, иерархические запросы
— опыт с Oracle (PL/SQL) и PostgreSQL
— Greenplum и/или ClickHouse
— Apache Spark / PySpark
— NiFi и Airflow
— Hadoop (HDFS) и Hive
Особенно интересен опыт миграции с Oracle / Informatica на Apache-стек.
Также важно:
— оптимизация SQL для highload: партиционирование, индексы, explain plans
— опыт проектирования архитектур обработки данных
*📩* Если ваш опыт совпадает с ключевыми требованиями — пишите в личные сообщения Откликнуться
В сообщении, пожалуйста, сразу пришлите резюме
Создайте идеальное резюме с помощью ИИ-агента
Навыки
- SQL
- Oracle
- PL/SQL
- PostgreSQL
- Greenplum
- ClickHouse
- Apache Spark
- PySpark
- Apache NiFi
- Apache Airflow
- Hadoop
- HDFS
- Apache Hive
- ETL
Возможные вопросы на собеседовании
Проект сфокусирован на миграции, поэтому важно понимать практические сложности перехода с Oracle на Apache-стек.
Расскажите о вашем самом сложном кейсе миграции данных из Oracle в Hadoop/Greenplum. С какими проблемами производительности вы столкнулись?
Вакансия требует навыков оптимизации для высоконагруженных систем.
Как вы подходите к анализу Explain Plan в PostgreSQL или Greenplum при оптимизации медленного запроса на больших объемах данных?
Airflow и NiFi — ключевые инструменты оркестрации и ETL в данном стеке.
В каких случаях вы предпочтете использовать Apache NiFi вместо Airflow для обработки данных, и как вы организуете их совместную работу?
Spark является стандартом для обработки Big Data.
Как вы боретесь с проблемой 'data skew' (перекоса данных) при выполнении Join операций в PySpark?
Работа с Greenplum требует понимания распределенных систем.
Каковы основные принципы выбора ключа дистрибуции в Greenplum, и как неправильный выбор влияет на производительность системы?
Похожие вакансии
Data инженер Middle
Middle+ Data Engineer
Backend / ML Infrastructure / MLOps инженер
ML-инженер
NLP Data Scientist
Data инженер (Middle)
1000+ офферов получено
Устали искать работу? Мы найдём её за вас
Quick Offer улучшит ваше резюме, подберёт лучшие вакансии и откликнется за вас. Результат — в 3 раза больше приглашений на собеседования и никакой рутины!