- Страна
- Россия
Откликайтесь
на вакансии с ИИ
Data Platform Engineer (Senior, Middle+)
Оценка ИИИнтересный стек технологий (Arenadata, Greenplum, Kafka) и работа в крупном индустриальном секторе. Удаленный формат работы и четко прописанные задачи делают вакансию привлекательной для опытных инженеров, хотя отсутствие указанной зарплаты снижает прозрачность.
Сложность вакансии
Оценка ИИВысокая сложность обусловлена требованием глубокой экспертизы в администрировании (а не просто использовании) специфического стека: Arenadata DB/Greenplum и Kafka. Роль подразумевает ответственность за L2/L3 поддержку и root cause analysis в enterprise-контуре.
Анализ зарплаты
Оценка ИИДля позиций Senior Data Platform Engineer на российском рынке зарплаты обычно начинаются от 300 000 рублей. Учитывая специфику стека (Greenplum, Arenadata), опытные специалисты могут претендовать на верхнюю границу рынка. Данная роль соответствует рыночным ожиданиям для крупных промышленных компаний.
Сопроводительное письмо
Составьте идеальное письмо к вакансии с ИИ-агентом
Откликнитесь уже сейчас
Откликнитесь через гугл-форму, указав ID 2591, чтобы ваша кандидатура была рассмотрена в приоритетном порядке!
Описание вакансии
ID 2591 - Senior, Middle+ Data Platform Engineer
🌍 Локация/гражданство: РФ
💼 Удаленно
🕔 Занятость: фулл тайм
🏢 Проект: Горнодобывающая компания
💡 Требования:
- Опыт администрирования Data Platform / Big Data / DWH от 3 лет
- Уверенное знание Linux (RHEL/CentOS/Ubuntu) на уровне системного администрирования
- Практический опыт эксплуатации production-кластеров: Arenadata DB / Greenplum (или аналогичные MPP-системы), Apache Kafka (обязательно с опытом администрирования, не только использования), ClickHouse
- Понимание распределенных систем: репликация, партиционирование, отказоустойчивость, сетевые взаимодействия (TCP/IP), storage
- Опыт работы с: PostgreSQL / Greenplum архитектурой, оптимизацией SQL-запросов
- Практика работы с Kafka: настройка топиков и retention policy, работа с replication / partitioning, performance tuning producer/consumer
- Навыки автоматизации: Bash и/или Python, Ansible и/или Terraform
- Опыт мониторинга: Prometheus, Grafana, ELK / OpenSearch
- Опыт работы с инцидентами: L2/L3 support, root cause analysis
📌 Nice to have:
- Docker / Kubernetes
- Hadoop ecosystem
- Spark / Flink
- Airflow
- Опыт работы с высоконагруженными enterprise DWH
- Опыт в промышленности / телекоме / финтехе
📋Задачи:
Эксплуатация и развитие платформы
- Администрирование и сопровождение Data Platform (Arenadata DB / Greenplum, Kafka, ClickHouse)
- Управление кластерами хранения и обработки данных
- Настройка и поддержка отказоустойчивости (HA), репликаций, балансировки
- Управление обновлениями, патчами и релизами
Kafka и потоковые данные
- Администрирование Kafka-кластеров (topology, partitioning, replication, retention)
- Тюнинг producer/consumer, работа с lag и производительностью
- Поддержка потоковых ETL и ingestion pipelines
Интеграции и работа с данными
- Интеграция платформы с DWH, BI и ML-системами
- Поддержка и развитие контуров передачи и обработки данных между системами
- Участие в обеспечении стабильности data pipelines
Производительность и надежность
- Мониторинг платформы (Prometheus, Grafana, ELK/OpenSearch)
- Анализ производительности (SQL, storage, network)
- Оптимизация запросов и работы кластеров
- Реагирование на инциденты (L2/L3), проведение root cause analysis
Инфраструктура и автоматизация
- Автоматизация эксплуатации (Bash / Python / Ansible / Terraform)
- Развитие CI/CD для инфраструктуры данных
- Управление конфигурациями (Infrastructure as Code)
Интеграции и доступы
- Интеграция с DWH, BI и ML системами
- Настройка RBAC и контроль доступа
Доступы и безопасность
- Настройка RBAC и разграничения доступа
Командная работа
- Подготовка документации и инструкций
- Передача знаний и участие в менторстве
❗️Важно, резюме должно отражать:
- Расписано, чем занимались на каждом проекте
📨 Оставить отклик можно по Откликнуться
❗️При отклике, указывайте, пожалуйста, ID вакансии, ваш стек и прикладывайте резюме.
❗️Без ID вакансии отклики не будут рассматриваться❗️
#Data #Engineer #Удаленно #вакансия
Создайте идеальное резюме с помощью ИИ-агента
Навыки
- Python
- Linux
- Terraform
- SQL
- Kubernetes
- Bash
- Prometheus
- Grafana
- PostgreSQL
- Docker
- Apache Spark
- Hadoop
- Apache Flink
- Apache Airflow
- Apache Kafka
- Ansible
- ELK stack
- ClickHouse
- OpenSearch
- Greenplum
Возможные вопросы на собеседовании
Вакансия требует глубокого понимания администрирования Kafka, включая тюнинг производительности.
Расскажите о вашем опыте настройки Retention Policy и обработки Lag в Kafka. Какие параметры producer/consumer вы оптимизировали для повышения пропускной способности?
Greenplum/Arenadata DB являются ключевыми элементами платформы.
С какими типичными проблемами производительности в Greenplum вы сталкивались и как проводили оптимизацию SQL-запросов и распределения данных (distribution keys)?
Роль включает задачи по обеспечению отказоустойчивости.
Опишите ваш опыт настройки High Availability (HA) для кластеров ClickHouse или Greenplum. Как вы тестируете сценарии отказа узлов?
Автоматизация — важная часть обязанностей.
Какие задачи по эксплуатации Data Platform вам удавалось автоматизировать с помощью Ansible или Terraform? Приведите пример сложного плейбука или модуля.
Позиция Senior/Middle+ предполагает участие в инцидент-менеджменте.
Приведите пример самого сложного инцидента на платформе данных, который вы расследовали. Каков был ваш алгоритм Root Cause Analysis?
Похожие вакансии
Senior DevOps / Voice Infrastructure Engineer
Senior DevOps (MLOps)
Senior DevOps
Senior DevOps
SRE инженер
Инженер по гибридной инфраструктуре (импортозамещение + облака)
1000+ офферов получено
Устали искать работу? Мы найдём её за вас
Quick Offer улучшит ваше резюме, подберёт лучшие вакансии и откликнется за вас. Результат — в 3 раза больше приглашений на собеседования и никакой рутины!
- Страна
- Россия