- Страна
- Казахстан
- Зарплата
- от 200 000 ₽
Откликайтесь
на вакансии с ИИ
Data Engineer
Оценка ИИСильная технологическая компания с четким стеком (ClickHouse, Airflow, DBT) и прозрачными требованиями. Зарплата соответствует рынку для Middle+/Senior уровня в регионе, а статус крупнейшего девелопера гарантирует масштабные задачи.
Сложность вакансии
Оценка ИИВакансия требует глубокой экспертизы в специфических инструментах, таких как ClickHouse (движки MergeTree) и Debezium для CDC. Высокий порог входа обусловлен необходимостью опыта работы более 3 лет и навыками оптимизации высоконагруженных систем.
Анализ зарплаты
Оценка ИИПредложенная зарплата от 200 000 ₽ является конкурентной для рынка Казахстана (Астана) для специалистов уровня Middle. Для Senior-позиций с таким глубоким стеком рыночные показатели могут быть выше, достигая 350 000 - 450 000 ₽.
Сопроводительное письмо
Составьте идеальное письмо к вакансии с ИИ-агентом
Откликнитесь в BI Group уже сейчас
Присоединяйтесь к лидеру девелопмента Центральной Азии и стройте современные data-пайплайны в BI Group!
Описание вакансии
🖥 Data Engineer
от 200 000 ₽
Офис (Астана)BI Group — крупнейшая девелоперская компания Центральной Азии.
Требования:
– Опыт работы более 3 лет в роли Data Engineer или на смежной позиции с фокусом на построение data-пайплайнов;
– ClickHouse — глубокое понимание движков семейства MergeTree (ReplacingMergeTree, AggregatingMergeTree, SummingMergeTree), партиционирования, проекций, материализованных представлений;
– Опыт настройки шардирования и репликации;
– Навыки оптимизации тяжёлых запросов;
– Debezium + Kafka — опыт настройки CDC-коннекторов для реляционных и NoSQL-источников, понимание snapshot/streaming-режимов, обработка schema evolution, работа с Kafka Connect;
– Apache Airflow — уверенное написание DAG'ов, опыт с TaskFlow API, разработка кастомных операторов и хуков, понимание архитектуры (scheduler, executor, workers), настройка мониторинга и алертинга;
– DBT — построение моделей и тестов (generic и singular), макросы, инкрементальные модели, работа с источниками и снапшотами, ведение документации;
– Уверенный SQL: оконные функции, CTE, чтение и оптимизация планов выполнения;
– Python на уровне продакшн-кода;
– Опыт работы с качеством данных: написание тестов, data contracts, observability-практики.
🔜 А избранные IT-вакансии вы найдете в нашем канале IT Job Hub
Создайте идеальное резюме с помощью ИИ-агента
Навыки
- Python
- SQL
- dbt
- Kafka
- Observability
- Apache Airflow
- CDC
- Data Quality
- ClickHouse
- Debezium
Возможные вопросы на собеседовании
Проверка глубоких знаний ClickHouse, указанных в требованиях.
В каких случаях вы выберете ReplacingMergeTree вместо обычного MergeTree, и какие нюансы нужно учитывать при финальной сборке данных?
Оценка опыта работы с CDC и Kafka Connect.
Как вы обрабатываете Schema Evolution в Debezium при изменении структуры таблиц в источнике?
Проверка навыков работы с DBT и понимания инкрементальной загрузки.
Какие стратегии инкрементальной загрузки в DBT вы использовали и как решали проблему дубликатов?
Оценка архитектурного понимания Airflow.
Расскажите о вашем опыте написания кастомных операторов в Airflow. В каких ситуациях стандартных операторов было недостаточно?
Проверка навыков обеспечения качества данных.
Как вы реализуете Data Contracts и какие инструменты используете для observability ваших пайплайнов?
Похожие вакансии
Senior Data Scientist
Data Scientist (Senior)
ML Engineer (Senior)
Старший специалист по Data Science
ML-инженер
Руководитель Data Science команды (Анализ спроса в маркетплейсе)
1000+ офферов получено
Устали искать работу? Мы найдём её за вас
Quick Offer улучшит ваше резюме, подберёт лучшие вакансии и откликнется за вас. Результат — в 3 раза больше приглашений на собеседования и никакой рутины!