Senior Data Engineer - Full remote

О позиции

Вы станете техническим экспертом по разработке прототипов и реализации облачной платформы данных вместе с архитекторами и инженерами решения. Работа предполагает ответственность за проектирование, внедрение и поддержку архитектуры данных, обеспечение соответствия бизнес-целям и требованиям безопасности. Это долгосрочная позиция без необходимости оформления разрешения на работу — кандидаты должны находиться в Европе.

Чем заниматься

• Планирование этапов и контрольных точек для реализации новой облачной архитектуры платформы данных
• Руководство разработкой и технической реализацией в соответствии с архитектурой платформы данных
• Консультации по проектированию концептуальных, логических и физических моделей данных
• Проектирование протоколов взаимодействия, API дизайна и управления, аспектов кибербезопасности
• Создание пайплайнов Data Factory для ингейта, трансформации и подготовки данных
• Использование Databricks для обработки данных и обеспечение доступности через API или отчётность
• Работа с базами данных SQL, Cosmos DB, Synapse Analytics
• Автоматизация процессов разработки через R notebooks, функции, DevOps проекты
• Поддержка ARM templates и Azure Blueprints
• Каталогизация текущей ландшафта данных и систем
• Разработка и поддержка облачной платформы данных в соответствии с требованиями безопасности
• Предоставление технических экспертиз по краткосрочным решениям для срочных задач

Что ждут

• Бакалавр или магистр по техническому направлению
• Более 5 лет опыта работы Data Engineer
• Опыт работы с современными технологиями данных: Business Intelligence, Analytics, AI, Big Data
• Программирование на нескольких языках: Python, R, Java, Scala
• Экспертиза в Microsoft Azure и других облачных технологиях
• Опыт проектирования интеграций между различными инфраструктурными сервисами
• Знание SDLC (жизненный цикл разработки ПО), Agile/Scrum методологий, ITIL процессов
• Внимание к деталям и способность собирать требования
• Уровень английского языка Professional level
• Нахождение в Европе

Будет плюсом

• Сертификации Microsoft (например, Azure Data Engineer Associate)
• ИТIL сертификации
• Опыт работы в международных институтах или организациях
• Опыт работы с Google Cloud Platform и AWS
• Опыт работы в распределённых корпоративных системах

Условия

• Долгосрочная работа в международном институте
• Полностью удалённый формат работы
• Работа с современными облачными технологиями и большими данными
• Возможность работать из любой страны Европы
• Разнообразные задачи в области облачной архитектуры данных
• Отсутствие требований к оформлению разрешения на работу

Навыки

• Azure
• Data Factory
• Databricks
• Synapse Analytics
• Cosmos DB
• Python
• R
• Java
• Scala
• DevOps
• SDLC
• Agile
• Scrum
• ITIL
• API Design
• Cloud Architecture
• Big Data
• Business Intelligence
• Data Modeling
• ARM Templates

Могут спросить на собеседовании

1. Расскажите о вашем опыте проектирования и внедрения облачных платформ данных на Azure
2. Как вы подходите к проектированию пайплайнов обработки данных в условиях больших объёмов информации?
3. Опишите ваш опыт работы с интеграцией различных источников данных и обеспечения их согласованности
4. Какие подходы вы применяете для обеспечения безопасности данных в облачной среде?
5. Как вы организовываете свою работу в рамках Agile/Scrum методологии?