Spotify
Backend Engineer - Data Platform
- Гибрид
- Stockholm
- 52 дн. назад
Backend Engineer для платформы данных в Spotify работает над стратегическим проектом LilEngine и Apache Iceberg — открытым стандартом для управления данными. Вы создадите архитектуру нового Lakehouse и обеспечите работу BigQuery для тысяч инженеров и научных сотрудников компании.
О позиции
Команда LilEngine развивает Lakehouse — стратегический проект компании по интеграции Apache Iceberg как первого класса в экосистему данных Spotify. Мы строим его в тесном сотрудничестве с Google на основе открытых стандартов, чтобы данные разных типов обрабатывались единообразно. Команда отвечает за хранение, поиск и запросы к данным через BigQuery, на котором зависят тысячи пользователей ежедневно.
Будет плюсом
- Опыт работы с Apache Spark, Trino или Dataflow
- Знакомство с архитектурой Lakehouse
- Опыт работы со Spark или Flink
- Вклад в Open Source проекты связанных с данными
- Опыт работы в международных компаниях
Условия
- Работа над критически важными продуктовыми решениями для всей организации
- Технологии мирового уровня и передовые практики индустрии
- Коллаборация с ведущими дата-инженерами из Spotify и Google
- Возможность повлиять на выбор архитектуры на ранней стадии проекта
- Международная команда и разнообразная рабочая среда
Навыки
- Apache Iceberg
- BigQuery
- Apache Parquet
- SQL
- Distributed Systems
- Data Warehousing
- Cloud Computing
- Java
- Scala
- Python
- Go
- System Architecture
Сложность отбора
Высокий уровень сложности из-за работы с масштабными распределёнными системами и новыми технологиями хранения данных
Оценка JobPathЗарплата по рынку
180 000 – 280 000 ₽ в месяц
Оценка основана на средних зарплатах Senior Backend Data Engineers в Стокгольме с учётом международного бренда Spotify
Оценка JobPath по рынку, не предложение работодателяМогут спросить на собеседовании
- Как вы обеспечиваете масштабируемость и отказоустойчивость распределённых систем хранения данных?
- Какие компромиссы вам приходилось делать при выборе между разными форматами хранения данных? Поясните на примере.
- Как бы вы подошли к проектированию новой системы для поддержки нативной записи Iceberg-таблиц?
- Как вы обеспечиваете надежность сервисов обработки данных при сбоях в распределённой среде?
- Что для вас важнее: консистентность данных или доступность при высоких нагрузках? Приведите пример из опыта.
Прорепетировать это собеседование
Голосовой ИИ-интервьюер задаст вопросы под эту вакансию и разберёт каждый ответ.
Начать бесплатноСохрани похожие вакансии
Новые вакансии с такой должностью будут собираться в кабинете.
Сохранить фильтр