Data Engineer

О позиции

Команда Safety and Customer Care обрабатывает более 1.7 млн взаимодействий ежемесячно и является основным каналом связи с пассажирами и водителями. Вы будете отвечать за моделирование данных и пайплайны, которые питают платформу AI-агентов и ассистентов. Ваша работа обеспечит точную отчётность о производительности агентов и выявление возможностей для оптимизации процессов.

Будет плюсом

• Опыт работы в высоконагруженных распределённых системах
• Знание других языков программирования помимо Python
• Опыт работы в финтех, transportation или customer-facing компаниях
• Практика внедрения data quality monitoring систем

Условия

• Расширенное медицинское и стоматологическое страхование, страхование жизни и инвалидности
• Психическое здоровье и ментальные health benefits
• Поддержка семьи — рождение детей, childcare и pet benefits
• Финансовый счёт Health Care Savings Account со стороны Lyft
• RRSP план с сопоставлением компании для накоплений
• Гибкий оплачиваемый отпуск (flexible PTO policy)
• 15 дней оплачиваемого отпуска с дополнительным днём за каждый год службы
• 18 недель оплачиваемого отпуска по рождению детей
• Субсидированные транспортные льготы и кредиты Lyft ride credits
• Гибридный график работы (минимум 3 дня в офисе: Пн, Ср, Чт)
• До 4 недель удалённой работы в году

Навыки

• Spark
• Python
• SQL
• AWS
• Hadoop
• S3
• Hive
• Presto
• Airflow
• ETL
• Data Warehousing
• Distributed Systems
• MapReduce
• Data Modeling
• Data Pipeline

Могут спросить на собеседовании

1. Опишите ваш опыт проектирования и масштабирования дата-пайплайнов в условиях быстрого роста объёма данных.
2. Как вы подходите к обеспечению качества данных и что включает ваша стратегия data quality monitoring?
3. Приведите пример сложности в оптимизации SQL или Spark задач и как вы её решили.
4. Расскажите о кросс-функциональном опыте работы с продуктовыми командами, data science и engineering.
5. Какие инструменты оркестрации workflow вы использовали и почему выбрали конкретное решение?