Откликайтесь
на вакансии с ИИ
Разработчик Big Data (Middle)
Оценка ИИХорошая вакансия для Middle-специалиста с возможностью работать удаленно и использовать современный стек (NiFi, Airflow). Четко прописанные требования и обязанности делают позицию понятной, хотя отсутствие названия компании и вилки зарплаты немного снижает прозрачность.
Сложность вакансии
Оценка ИИПозиция требует уверенного владения SQL и понимания специфики Big Data стека (Hadoop, Hive). Основная сложность заключается в необходимости знания нескольких языков программирования (Java/Groovy/Python) и опыта работы с графическими ETL-инструментами.
Анализ зарплаты
Оценка ИИВ объявлении не указана заработная плата, однако для Middle Data Engineer на российском рынке медиана составляет около 220,000 - 280,000 рублей. Предложение будет конкурентоспособным, если попадет в этот диапазон.
Сопроводительное письмо
Составьте идеальное письмо к вакансии с ИИ-агентом
Откликнитесь уже сейчас
Отправьте свое резюме и чек-лист по требованиям прямо сейчас, чтобы присоединиться к команде Big Data!
Описание вакансии
ID 3013
Middle
Гражданство: любое
Формат работы: удалённый
Требования
- Общее представление о стеке технологий #BigData.
- Понимать различия работы между BigData и с данными обычного размера.
- Знание SQL (индексы, функции, умение писать не сложные запросы).
- Опыт работы с любой реляционной #БД (#Oracle, #Postgres, #MySQL, MsSQL, DB2 и т.п.).
- Умение работать с Git (знание команд git pull/commit/push).
- Опыт работы с любым графическим ETL инструментом (Apache Nifi, Airflow, Talend, Informatica, SAS и т.п.).
- Представление о работе с #Hadoop.
- Понимание устройства HDFS, форматов данных.
- Понимание работы с Hive или любого другого хранилища на основе Hadoop.
- Опыт использования системами ведения проектов и документации.
- Знания основ программирования (JAVA, Groovy, Python).
Обязанности
- Разработка, реализация и поддержка типовых интеграционных решений на стеке технологий, принятых в команде. (Java, Groovy, Apache Nifi, Airflow)
- Оперативное реагирование на информацию о проблемах в зоне ответственности, выполнение типовых задач в установленный срок.
- Поддержание в актуальном состоянии документации типовых интеграционных решений платформы больших данных.
- Предоставление отчетности о своей деятельности начальнику отдела/ руководителю в порядке, установленном руководством.
При подаче указывайте:
- ФИО
- Локация
- Дата рождения
- Чек по требованиям (+/-)
Писать *💐**💐**💐**💐**💐**💐*
Создайте идеальное резюме с помощью ИИ-агента
Навыки
- SQL
- Oracle
- PostgreSQL
- MySQL
- Git
- Apache NiFi
- Airflow
- Hadoop
- HDFS
- Hive
- Java
- Groovy
- Python
- ETL
Возможные вопросы на собеседовании
Проверка понимания фундаментальных различий в обработке данных разного масштаба.
В чем ключевые отличия при проектировании ETL-процессов для классических реляционных БД и для систем на базе Hadoop?
Оценка практического опыта работы с основным инструментом интеграции, указанным в вакансии.
Опишите ваш опыт работы с Apache NiFi: какие процессоры вы использовали чаще всего и как настраивали мониторинг потоков?
Проверка навыков оптимизации запросов в распределенных системах.
Как бы вы оптимизировали медленный запрос в Hive? Какие механизмы (например, партиционирование или бакетирование) вы бы применили?
Оценка навыков программирования в контексте обработки данных.
В каких случаях при работе с NiFi или Airflow вы предпочтете написать кастомный скрипт на Groovy или Python вместо использования стандартных компонентов?
Проверка владения инструментами контроля версий в командной разработке.
Как вы разрешаете конфликты при слиянии веток в Git, если несколько разработчиков изменили один и тот же ETL-пайплайн?
Похожие вакансии
Data инженер (Middle)
Middle+ Data Engineer
Backend / ML Infrastructure / MLOps инженер
Data Engineer Middle
Data Scientist (Модели оценки качества), Диалоговый ИИ и ML сервисы
Специалист по науке о данных прогнозирования
1000+ офферов получено
Устали искать работу? Мы найдём её за вас
Quick Offer улучшит ваше резюме, подберёт лучшие вакансии и откликнется за вас. Результат — в 3 раза больше приглашений на собеседования и никакой рутины!