Откликайтесь
на вакансии с ИИ
Middle+ Data Engineer
Оценка ИИПозиция предлагает работу с современным и востребованным стеком технологий (Hadoop, Greenplum, Spark) и полную удаленку. Четко прописанные задачи и требования указывают на зрелость процессов в команде.
Сложность вакансии
Оценка ИИРоль требует глубоких знаний как классических ETL-инструментов (SAS DIS, Informatica), так и современного стека Big Data (Hadoop, Spark, Kafka). Высокий порог входа обусловлен необходимостью опыта работы с MPP-системами и сложной оптимизацией SQL.
Анализ зарплаты
Оценка ИИЗарплата в объявлении не указана, но для уровня Middle+ Data Engineer на российском рынке и в СНГ вилка обычно составляет от 250 000 до 400 000 рублей. Предложение будет конкурентоспособным, если попадет в этот диапазон.
Сопроводительное письмо
Составьте идеальное письмо к вакансии с ИИ-агентом
Откликнитесь уже сейчас
Присоединяйтесь к команде экспертов по данным и развивайте архитектуру DWH в масштабных проектах!
Описание вакансии
ID 2635 - Middle+ Data Engineer
🌍 Локация: Любая
💼 Удаленно
🕔 Занятость: фулл тайм
💡 Требования:
Знание принципов построения хранилищ данных;
• Понимание архитектур MPP систем;
• Опыт работы с экосистемой Hadoop/ навыки Data Engineer (HDFS/YARN/Spark/kafka/Nifi/Sqoop/flume и т.д.);
• Знание SQL (DDL, DML), опыт оптимизации запросов;
• Опыт работы с Greenplum либо отличное знание PostgreSQL;
• Практический опыт работы с SAS DIS/Informatica PowerCenter;
• Опыт использования системам ведения проектов и документации, сопровождения и мониторинга информационных систем, находящихся в зоне ответственности;
• Навык работы с Git, Jira, Confluence;
📌Описание задачи
Разработка технического задания
Разработка программного кода
Создание технической документации на стадии разработки
Настройка целевого решения
📋Задачи:
Проектирование и разработка потоков данных на ETL/ELT инструментах;
• Имплементация кастомных трансформаций;
• Проектирование и построение прототипов, витрин;
• Анализ производительности, масштабирование существующих систем;
• Оптимизация SQL запросов и структур баз данных;
• Разработка процедур на языке PL/pgSQL;
• Развитие архитектуры DWH, анализ и выбор оптимальных технологий, методологий, инструментов;
• Создание и актуализация базы знаний для пользователей DWH
📨 Отклик — через форму: Откликнуться
или напрямую рекрутеру Откликнуться
❗️Откликайтесь только при релевантном опыте.
❗️При первичном отклике:
ID вакансии / ФИО / локация / возраст / занятость (работаете/нет) / формат работы (удаленка, гибрид, офис) / стек / опыт / резюме / сверка с требованиями
❗️Повторный отклик: ID вакансии + сверка.
#Data #Engineer #Удаленно #вакансия
Создайте идеальное резюме с помощью ИИ-агента
Навыки
- Data Engineering
- Hadoop
- HDFS
- YARN
- Apache Spark
- Apache Kafka
- Apache NiFi
- Sqoop
- Apache Flume
- SQL
- Greenplum
- PostgreSQL
- SAS Data Integration Studio
- Informatica PowerCenter
- Git
- Jira
- Confluence
- ETL
- ELT
- PL/pgSQL
- DWH
Возможные вопросы на собеседовании
Проверка понимания архитектурных особенностей MPP-систем, заявленных в требованиях.
Расскажите об основных принципах распределения данных в Greenplum. Как выбор ключа дистрибуции влияет на производительность JOIN-операций?
Вакансия предполагает работу с большими данными и Spark.
С какими проблемами перекоса данных (data skew) вы сталкивались при работе со Spark и какими методами их решали?
В требованиях указаны SAS DIS и Informatica, важно понять опыт миграции или интеграции.
Был ли у вас опыт переноса логики из SAS DIS/Informatica в Spark или Greenplum? С какими сложностями вы сталкивались?
Оптимизация SQL — ключевой навык для данной позиции.
Опишите ваш подход к оптимизации тяжелого SQL-запроса в PostgreSQL/Greenplum. На какие показатели в плане выполнения (EXPLAIN ANALYZE) вы смотрите в первую очередь?
Проверка навыков проектирования DWH.
Какую методологию моделирования данных (Data Vault, Kimball, Inmon) вы предпочитаете для построения витрин и почему?
Похожие вакансии
ML-инженер
Python разработчик (DWH/Data Engineering)
Data Scientist Middle+, Senior
Data Scientist
Middle+ Data инженер
Senior Data инженер
1000+ офферов получено
Устали искать работу? Мы найдём её за вас
Quick Offer улучшит ваше резюме, подберёт лучшие вакансии и откликнется за вас. Результат — в 3 раза больше приглашений на собеседования и никакой рутины!