Lead Data Engineer - Remote (NC, AZ, FL, TX)

О позиции

Вы будете присоединиться к команде Cloud Data and AI Platform Organization и возглавляете разработку масштабируемых решений по обработке данных для аналитики, бизнес-отчётности и принятия управленческих решений. Роль сочетает технические вызовы с наставничеством младших инженеров и продвижением лучших практик в области инженерии данных внутри организации.

Чем заниматься

• Руководство проектированием, разработкой и внедрением корпоративных решений для обработки данных
• Создание и поддержка дата-хранилищ, операционных хранилищ данных (ODS) и ETL/ELT пайплайнов
• Разработка пакетной и потоковой обработки данных в реальном времени
• Партнёрство с бизнес-стейкхолдерами для перевода требований в масштабируемые решения
• Определение стратегий качества данных, стандартов тестирования и compliance-контролей
• Внедрение практик мониторинга, observability и SLA/SLO для платформ данных
• Установление стратегий деплоя и release-гovernance для надёжной доставки решений
• Менторство команд инженеров и продвинутые технические discussions

Что ждут

• Бакалавр + 6 лет опыта в Data Engineering или среднее образование + 10 лет
• Продвинутый опыт работы с облачными платформами (AWS/Azure/GCP)
• Продвинутые навыки Snowflake, Spark и современных платформ data warehousing
• Экспертиза в Python и SQL на продвинутом уровне
• Опыт разработки и оркестрации ETL/ELT пайплайнов с dbt, Apache Airflow
• Опыт data modeling и data engineering best practices
• Опыт работы в enterprise средах со сложными данными
• Сильные аналитические и коммуникационные навыки

Будет плюсом

• Опыт с Enterprise ETL инструментами (DataStage, Informatica, SSIS)
• Опыт работы с ODS и аналитическими платформами
• Знание Snowflake Cortex, Change Data Capture, streaming технологий (Kafka, Amazon Kinesis)
• Интеграция данных между AWS, on-premises и Snowflake
• Опыт Data Vault modeling
• Опыт в financial services/banking/regulated industries
• Знание Tableau, Power BI
• AWS Certified Data Engineer/Solutions Architect или SnowPro сертификаты
• Опыт использования AI-powered development tools

Условия

• Конкурентоспособная зарплата $128,935–$168,000 в год в зависимости от навыков и локации
• Возможность удалённой работы из нескольких штатов США
• Гибкие условия труда
• Комплексная программа benefit packages
• Карьерный рост в growing Cloud Data and AI Platform organization
• Возможность наставничества и продвижения technical best practices
• Работа с передовыми технологиями облачной data engineering

Навыки

• AWS
• Snowflake
• dbt
• Python
• SQL
• ETL
• ELT
• Apache Airflow
• Kafka
• Spark
• Data Warehousing
• Data Modeling
• Real-time Streaming
• Operational Data Store
• Data Governance
• CI/CD
• Docker
• Kubernetes
• Jira
• Git

Могут спросить на собеседовании

1. Расскажите о вашем опыте проектирования архитектуры дата-платформ для enterprise-сегмента
2. Как вы обеспечивали качество данных в предыдущих проектах? Какие метрики использовали?
3. Приведите пример оптимизации производительности ETL/ELT пайплайна. Как измеряли результаты?
4. Как вы подходите к менторству инженеров junior/middle уровня? Дайте пример.
5. Какие trade-offs вы рассматриваете при выборе между batch и real-time processing?