Data Engineer (Databricks) | SR

О позиции

Компания Compass UOL ищет опытного инженера данных для работы над сложными задачами архитектуры и обработки больших объёмов информации. Вы будете определять эволюцию инфраструктуры данных, обеспечивать оптимизацию пайплайнов и решать технические задачи высокой сложности. Роль требует глубокого знания экосистемы Databricks и опыта построения production-ready систем обработки данных в режиме реального времени и пакетного режима. Это возможность стать техническим лидером команды и задавать стандарты инженерии данных.

Будет плюсом

• Сертификация Databricks Certified Data Engineer Professional
• Опыт работы с PostgreSQL, MongoDB, Cassandra
• Знание AWS Glue и BigQuery
• Опыт с Kafka и Airflow
• dbt для трансформации данных
• Программирование на SQL высокого уровня

Условия

• Конкурентная зарплата с учётом экспертизы
• ДМС и стоматологическая страховка
• Страхование здоровья для питомцев
• Компенсация home office (для удалённых позиций)
• Корпоративное обучение и программы сертификаций (Adobe, AWS, Google, Microsoft)
• Психологическая и нутрициологическая поддержка (Zenklub)
• Программа TotalPass (спорт и wellness)
• Доступ к контенту UOL
• Продлённая декретная отпуск
• Программа рекомендаций сотрудников

Навыки

• Apache Spark
• Python
• Azure Data Factory
• Databricks
• Delta Lake
• Unity Catalog
• Structured Streaming
• CDC
• CI/CD
• Git
• REST API
• Kafka
• Airflow
• dbt
• PostgreSQL
• MongoDB
• Cassandra
• AWS Glue
• BigQuery
• Lakehouse Architecture