- Зарплата
- 3 000 € – 4 000 €
Откликайтесь
на вакансии с ИИ
Senior Data Engineer (ADB + Python)
Оценка ИИПривлекательная вакансия с современным стеком (LLM, RAG, Databricks) и прозрачными требованиями. Удаленный формат работы в Европе и четко указанный диапазон зарплаты делают предложение конкурентоспособным.
Сложность вакансии
Оценка ИИРоль требует глубоких знаний Apache Spark и экосистемы Azure, а также опыта работы с микросервисной архитектурой. Высокая планка ответственности за стандарты кодирования и код-ревью предполагает наличие лидерских качеств.
Анализ зарплаты
Оценка ИИПредложенная зарплата в 3000–4000 EUR соответствует начальному и среднему уровню для Senior-позиций на европейском рынке удаленной работы, однако для топовых специалистов в этой области рынок может предлагать до 5000–6000 EUR.
Сопроводительное письмо
Составьте идеальное письмо к вакансии с ИИ-агентом
Откликнитесь в Forrards уже сейчас
Присоединяйтесь к Forrards и создавайте масштабируемые решения на стеке Azure и Databricks — откликайтесь прямо сейчас!
Описание вакансии
#DE #dataengineer #senior #remoteEU #vacancy #job
✅ Senior Data Engineer (ADB + Python)
Company: Forrards
Location: remote EU only
Salary: 3-4k eu/month
Description
We are seeking a motivated Senior Data Engineer (ADB + Python) to join a new project utilizing a modern technology stack.
Project Tech Stack
Azure Cloud, Microservices Architecture, .NET 8, ASP. NET Core services, Python, MongoDB, Azure SQL, Angular 18, Kendo, GitHub Enterprise with Copilot, LangGraph, LangChain, RAG Pipelines, Multi-modal LLMs.
Responsibilities
• Define and enforce best practices and coding standards across the project.
• Conduct thorough code reviews to ensure adherence to established guidelines and maintain high code quality.
• Work both independently and in close collaboration with team members.
• Communicate clear instructions to team members and assist in managing daily operational workflows.
• Maintain regular communication with the client.
• Design, develop, and maintain robust and scalable Spark applications.
• Write clean, maintainable, and efficient code in accordance with best practices and coding standards.
• Optimize code for performance and scalability to ensure efficient data handling.
• Collaborate closely with cross-functional teams to deliver high-quality software solutions.
• Identify and resolve technical issues to ensure application reliability and performance.
• Create and maintain comprehensive documentation for code, processes, and workflows.
Qualifications
• 5+ years of hands-on experience in software development.
• Extensive experience with Apache Spark, including platforms such as Databricks and/or Azure Synapse/Fabric.
• Proficiency in Python, with strong skills in data manipulation using Pandas, Polars, and similar libraries.
• Solid understanding of columnar data storage formats, particularly Parquet, with practical experience using Delta Tables.
• Proven expertise in data processing, analysis, and transformation workflows.
• Strong analytical and problem-solving abilities with a detail-oriented mindset.
• A practical and pragmatic approach to balancing standardized processes with the flexibility required to meet project goals effectively.
• Excellent organizational skills, including the ability to self-manage, prioritize tasks, structure workload, and meet tight deadlines.
• Solid understanding of microservices architecture and its implementation in scalable systems.
Preferred Qualifications
• Experience with Azure Cloud services (or other major cloud platforms), including Service Bus, Data Lake, Blob Storage, and Redis.
• Familiarity with FastAPI.
• Expertise in containerization and orchestration tools such as Docker
- Language Requirement: Intermediate+ English
.
Recruiter
Создайте идеальное резюме с помощью ИИ-агента
Навыки
- Azure
- Python
- Pandas
- Microservices
- RAG
- Docker
- Delta Lake
- Apache Spark
- Databricks
- Polars
- FastAPI
- Azure Synapse Analytics
- MongoDB
- LangChain
- Azure SQL
- Parquet
Возможные вопросы на собеседовании
Проверка глубоких знаний оптимизации Spark, что критично для производительности систем.
Расскажите о наиболее сложных проблемах производительности в Spark, с которыми вы сталкивались, и как вы их решали (например, skewness или spill).
Вакансия предполагает работу с Delta Tables, важно понимать их преимущества.
В чем основные преимущества использования Delta Tables по сравнению с обычным Parquet в контексте ACID-транзакций?
Проект использует микросервисы, важно понимать интеграцию данных в такой среде.
Как вы организуете консистентность данных при передаче между микросервисами в облачной среде Azure?
Позиция Senior подразумевает контроль качества кода всей команды.
На какие аспекты вы обращаете внимание в первую очередь при проведении код-ревью для Data Engineering задач?
В стеке указаны LLM и RAG, что является современным трендом.
Был ли у вас опыт подготовки данных для RAG-пайплайнов или работы с векторными базами данных?
Похожие вакансии
Middle+ Data инженер
Data Engineer (AI / ML)
Senior Data Engineer
Senior Data Engineer
Senior Data Scientist
Senior MLE в МТС Защитник
1000+ офферов получено
Устали искать работу? Мы найдём её за вас
Quick Offer улучшит ваше резюме, подберёт лучшие вакансии и откликнется за вас. Результат — в 3 раза больше приглашений на собеседования и никакой рутины!