- Страна
- Россия
Откликайтесь
на вакансии с ИИ
Дата-инженер — Spark
Оценка ИИТ-Банк — один из лидеров финтеха с сильной инженерной культурой. Вакансия предлагает работу с современным стеком (Iceberg, Spark) и возможность влиять на стандарты внутри крупного сообщества.
Сложность вакансии
Оценка ИИРоль требует глубокой экспертизы в Spark и архитектуре данных (Iceberg, DLH), а также навыков оптимизации ресурсов, что выше среднего уровня обычного ETL-разработчика.
Анализ зарплаты
Оценка ИИЗарплата в вакансии не указана, но для уровней Middle/Senior в российском финтехе вилка обычно составляет от 250 000 до 450 000 рублей после вычетов. Т-Банк обычно предлагает конкурентные условия, соответствующие верхней границе рынка.
Сопроводительное письмо
Составьте идеальное письмо к вакансии с ИИ-агентом
Откликнитесь в Т-Банк уже сейчас
Присоединяйтесь к команде Т-Банка и развивайте передовые ETL-процессы на Spark и Iceberg!
Описание вакансии
Дата-инженер — Spark
#удаленка #middle #senior
Компания:Т-Банк
🔹Обязанности
-Анализировать работу существующих Spark-процессов, искать проблемные места и давать рекомендации по их улучшению
-Вырабатывать и документировать лучшие практики Iceberg + Spark для сообщества дата-инженеров
-Развивать алгоритм выделения ресурсов для ETL-процессов на Spark
-Искать и реализовывать стратегические меры, которые улучшат производительность ETL-процессов на Spark
🔹Требования
-У вас есть промышленный опыт реализации ETL-процессов
-Есть опыт анализа данных, знаете математическую статистику
-Глубоко понимаете архитектуру хранилищ данных DWH и озер данных DLH
-Знаете на уверенном уровне принципы распределенных данных и вычислений
-Отлично разбираетесь в Spark
Контакты: Откликнуться
🔥Подписаться на наши каналы / @best_itjob / @it_rab
Создайте идеальное резюме с помощью ИИ-агента
Навыки
- Apache Spark
- Apache Iceberg
- ETL
- DWH
- Data Lake
- Mathematical Statistics
Возможные вопросы на собеседовании
Проверка понимания внутреннего устройства инструмента, заявленного как ключевой.
Расскажите про Spark Memory Management: как распределяется память между Storage и Execution и как это влияет на производительность?
Вакансия предполагает работу с Iceberg.
В чем основные преимущества формата Apache Iceberg перед Parquet в контексте транзакционности и эволюции схем?
Одна из обязанностей — поиск проблемных мест в процессах.
Какие стратегии вы используете для борьбы с Data Skew (перекосом данных) в Spark-джойнах?
Упоминается развитие алгоритмов выделения ресурсов.
Как работает Dynamic Allocation в Spark и в каких случаях его использование может быть неэффективным?
Требуется знание принципов распределенных вычислений.
Объясните разницу между Narrow и Wide Transformations и как они влияют на создание стадий (stages) в Spark Job.
Похожие вакансии
Senior BI-Engineer
Разработчик BI Insight (Senior)
Senior Data Analyst (банк)
Senior Data Analyst
Senior Data Engineer
Аналитик DWH
1000+ офферов получено
Устали искать работу? Мы найдём её за вас
Quick Offer улучшит ваше резюме, подберёт лучшие вакансии и откликнется за вас. Результат — в 3 раза больше приглашений на собеседования и никакой рутины!
- Страна
- Россия