yandex
8451
Страна
США
Зарплата
97 000 $ – 166 750 $
+500% приглашений

Откликайтесь
на вакансии с ИИ

Ускорим процесс поиска работы
SeniorВ офисеПолная занятость

Senior Data Engineer

Оценка ИИ

Сильная компания с огромными объемами реальных данных, прозрачная вилка зарплаты и отличный социальный пакет (5 недель отпуска). Однако, обязательное присутствие в офисе 5 дней в неделю может подойти не всем.


Вакансия из Quick Offer Global, списка международных компаний
Пожаловаться

Сложность вакансии

ЛегкоСложно
Оценка ИИ

Роль требует глубоких знаний стека Azure/Databricks и опыта работы с большими данными (62 млн домохозяйств). Высокая планка ответственности за весь жизненный цикл разработки (SDLC) и наставничество.

Анализ зарплаты

Медиана145 000 $
Рынок110 000 $ – 180 000 $
Оценка ИИ

Предложенный диапазон $97k – $167k полностью соответствует рыночным стандартам для Senior Data Engineer в таких городах, как Цинциннати и Чикаго. Нижняя граница подходит для специалистов с минимально требуемым опытом (3 года), а верхняя — для экспертов с глубоким знанием Azure и Kafka.

Сопроводительное письмо

I am writing to express my strong interest in the Senior Data Engineer position at 84.51°. With over 5 years of experience in data engineering and a deep proficiency in PySpark, Databricks, and the Azure ecosystem, I have a proven track record of building scalable data pipelines that transform complex datasets into actionable insights. My background in developing robust ETL processes and implementing automated testing aligns perfectly with your team's commitment to high-quality data delivery.

Throughout my career, I have successfully led feature development within Agile environments, mentoring junior engineers and collaborating with cross-functional teams to solve complex architectural challenges. I am particularly impressed by 84.51°'s use of first-party retail data from 62 million households, and I am eager to apply my expertise in Delta Lake and CI/CD practices to further enhance your data capabilities. I am confident that my technical skills and proactive approach to process improvement will make me a valuable asset to your engineering department.

+250% к просмотрам

Составьте идеальное письмо к вакансии с ИИ-агентом

Составьте идеальное письмо к вакансии с ИИ-агентом

Откликнитесь в 8451 уже сейчас

Присоединяйтесь к команде 84.51° и создавайте инновационные решения для работы с данными крупнейшего ритейлера США!

Описание вакансии

84.51° Overview:

84.51° is a retail data science, insights and media company. We help The Kroger Co., consumer packaged goods companies, agencies, publishers and affiliates create more personalized and valuable experiences for shoppers across the path to purchase.

Powered by cutting-edge science, we utilize first-party retail data from more than 62 million U.S. households sourced through the Kroger Plus loyalty card program to fuel a more customer-centric journey using 84.51° Insights, 84.51° Loyalty Marketing and our retail media advertising solution, Kroger Precision Marketing.

84.51° follows a 5‑day in‑office work schedule to support collaboration, alignment, and team connection.

Join us at 84.51°!

________________________________________________________

\*\*PLEASE NOTE\*\*

Applicants for employment in the US must have work authorization that does not now or in the future require sponsorship of a visa for employment authorization in the United Stated and with the Kroger Family of Companies (i.e. H1-B visa, F-1 visa (OPT), TN visa or any other non-immigrant status).

Senior Data Engineer

Cincinnati, OH or Chicago, IL

84.51° Overview:

84.51° is a retail data science, insights and media company. We help The Kroger Co., consumer packaged goods companies, agencies, publishers and affiliates create more personalized and valuable experiences for shoppers across the path to purchase.

Powered by cutting-edge science, we utilize first-party retail data from more than 62 million U.S. households sourced through the Kroger Plus loyalty card program to fuel a more customer-centric journey using 84.51° Insights, 84.51° Loyalty Marketing and our retail media advertising solution, Kroger Precision Marketing.  Join us at 84.51°!

As a Senior Data Engineer, you will have the opportunity to build solutions that ingest, transform, store, and distribute our big data to be consumed by data scientists and our products.

Our data engineers use PySpark/Python, Databricks, and other Azure based data engineering technologies and visualization tools to deliver data capabilities and services to our scientists, products, and tools.

ResponsibilitiesTake ownership of features and drive them to completion through all phases of the entire 84.51° SDLC.  This includes internal and external facing applications as well as process improvement activities:

  • Design, build, and maintain scalable, efficient, and reliable data pipelines to support data ingestion, transformation, and integration across diverse sources and destinations, using tools such as Kafka, Databricks, and similar toolsets
  • Implement automated unit and integration testing
  • Collaborate with architecture and lead engineers to ensure consistent development practices
  • Provide mentoring to junior engineers
  • Participate in retrospective reviews
  • Participate in the estimation process for new work and releases
  • Collaborate with other engineers to solve and bring new perspectives to complex problems
  • Drive improvements in data engineering practices, procedures, and ways of working
  • Embrace new technologies and an ever-changing environment

Requirements

  • 3+ years proven ability of professional Data Development experience
  • 2+ years proven ability of developing with Databricks or Hadoop/HDFS
  • 2+ years of experience with PySpark/Spark
  • 3+ years of experience developing with either Python or Java
  • 3+ years of experience with SQL and NoSQL technologies.
  • Full understanding of ETL concepts and Data Warehousing concepts
  • Experience with Pipeline Orchestration
  • Experience with CI/CD
  • Experience with version control software
  • Strong understanding of Agile Principles (Scrum)
  • Bachelor’s Degree (Computer Science, Management Information Systems, Mathematics, Business Analytics, or STEM)

Bonus Points for experience in the following

  • Experience with Azure
  • Experience with Databricks Delta Tables, Delta Lake, Delta Live Tables
  • Proficient with Relational Data Modeling
  • Experience with CI/CD pipelines
  • Experience with Python Library Development
  • Experience with Structured Streaming (Spark or otherwise)
  • Experience with Kafka and/or Azure Event Hub
  • Experience with Github SaaS / Github Actions
  • Experience with Snowflake
  • Exposure to BI Tooling (Tableau, Power BI, Cognos, etc.)

#LI-SSS

Pay Transparency and Benefits

  • The stated salary range represents the entire span applicable across all geographic markets from lowest to highest.  Actual salary offers will be determined by multiple factors including but not limited to geographic location, relevant experience, knowledge, skills, other job-related qualifications, and alignment with market data and cost of labor. In addition to salary, this position is also eligible for variable compensation.
  • Below is a list of some of the benefits we offer our associates:
  • Health: Medical: with competitive plan designs and support for self-care, wellness and mental health. Dental: with in-network and out-of-network benefit. Vision: with in-network and out-of-network benefit.
  • Wealth: 401(k) with Roth option and matching contribution. Health Savings Account with matching contribution (requires participation in qualifying medical plan). AD&D and supplemental insurance options to help ensure additional protection for you.
  • Happiness: Paid time off with flexibility to meet your life needs, including 5 weeks of vacation time, 7 health and wellness days, 3 floating holidays, as well as 6 company-paid holidays per year. Paid leave for maternity, paternity and family care instances.

Pay Range

$97,000—$166,750 USD

+400% к собеседованиям

Создайте идеальное резюме с помощью ИИ-агента

Создайте идеальное резюме с помощью ИИ-агента

Навыки

  • Python
  • PySpark
  • Databricks
  • SQL
  • Azure
  • Kafka
  • ETL
  • Data Warehousing
  • CI/CD
  • Agile
  • Scrum
  • Delta Lake
  • Snowflake
  • NoSQL
  • Java

Возможные вопросы на собеседовании

Вакансия требует опыта работы с Databricks и Spark. Важно понимать, как кандидат справляется с типичными проблемами производительности.

Расскажите о вашем опыте оптимизации производительности PySpark приложений в среде Databricks. Какие стратегии вы использовали для борьбы с перекосом данных (data skew)?

В описании упоминаются Delta Tables и Delta Lake. Это ключевой стек для компании.

В чем основные преимущества использования Delta Lake по сравнению с обычным Parquet, и как вы использовали Delta Live Tables в своих проектах?

Позиция Senior подразумевает участие в архитектурных решениях.

Опишите случай, когда вам пришлось проектировать масштабируемый ETL-конвейер с нуля. Какие факторы вы учитывали при выборе инструментов оркестрации и хранения?

Упоминается работа с Kafka и Structured Streaming.

Как вы обеспечиваете отказоустойчивость и семантику 'exactly-once' при обработке потоковых данных с использованием Spark Structured Streaming и Kafka?

Роль включает менторство и работу в Agile-команде.

Как вы подходите к проведению код-ревью и менторству младших коллег? Можете ли вы привести пример, когда ваше архитектурное решение встретило сопротивление и как вы его обосновали?

Похожие вакансии

roku
190 000 $ – 225 000 $

Senior Tableau Engineer

SeniorГибридСША
Tableau · SQL · Data Modeling · AWS · Google Cloud Platform · Snowflake · BigQuery · Trino · Apache Spark · Hadoop · Star Schema · Performance Tuning
+12 навыков
roku
190 000 $ – 225 000 $

Senior Tableau Engineer

SeniorГибридСША
Tableau · SQL · Data Modeling · AWS · Google Cloud Platform · Snowflake · BigQuery · Trino · Apache Spark · Hadoop · Star Schema · Performance Tuning
+12 навыков
aarkiinc
Не указана

Senior Data Engineer

SeniorВ офисеСША
Kafka · Spark · ClickHouse · HDFS · Fluentd · Distributed Systems · Data Modeling · Real-Time Bidding · Big Data · Python · Java · Scala
+12 навыков
klaviyo
148 000 $ – 222 000 $

Senior Software Engineer - Analytics Data Engineering

SeniorВ офисеСША
Python · SQL · Airflow · Apache Spark · PySpark · Amazon EMR · dbt · Data Modeling · Data Pipelines · SaaS · Machine Learning · Analytics
+12 навыков
midihealth
150 000 $ – 175 000 $

Senior Data Analyst - Commerce

SeniorГибридСША
SQL · Tableau · Looker · Metabase · PostgreSQL · MySQL · Shopify · E-commerce Analytics · LTV · A/B Testing
+10 навыков
maintainx
Не указана

Développeur de données senior

SeniorГибридКанада
Databricks · ETL · Data Modeling · Backend Development · Event-Driven Architecture · Vector Database · RAG · GDPR · SOC2 · Apache Spark
+10 навыков
более 1000 офферов получено
4.9

1000+ офферов получено

Устали искать работу? Мы найдём её за вас

Quick Offer улучшит ваше резюме, подберёт лучшие вакансии и откликнется за вас. Результат — в 3 раза больше приглашений на собеседования и никакой рутины!

8451
Страна
США
Зарплата
97 000 $ – 166 750 $