Engineer III - Platform Data Engineer

О позиции

Платформенный инженер по данным будет отвечать за проектирование, развертывание и эксплуатацию критически важной инфраструктуры данных, которая поддерживает аналитическую экосистему CrowdStrike. Эта роль находится на стыке инфраструктуры и инженерии данных, обеспечивая надежность, масштабируемость и производительность платформенных решений компании. Вы будете работать с огромными объемами данных — почти 3 триллиона событий ежедневно, что требует высочайшего уровня технической экспертизы.

Чем заниматься

• Развертывание, конфигурация и администрирование ключевых платформенных инструментов включая Airflow и Superset в production-средах
• Управление инфраструктурой как кодом для компонентов платформы данных с использованием Terraform
• Создание и поддержка CI/CD пайплайнов для деплоя сервисов платформы и рабочих потоков данных
• Внедрение и контроль стандартов безопасности платформы, управления доступом и соответствия требованиям
• Разработка и поддержка моделей данных с использованием DBT, каталогизация активов в OpenMetadata
• Написание эффективного кода на Python для автоматизации платформенных процессов и обработки данных
• Наставничество младших инженеров и обеспечение технического лидерства в команде

Что ждут

• Гражданство США или статус постоянного резидента (требуется возможность получения clearance по CJIS)
• Бакалаврская степень в Computer Science или связанной области
• Опыт работы 5+ лет в инфраструктурной и data engineering областях
• Продвинутые навыки программирования на Python (5+ лет опыта)
• Экспертные знания по развертыванию и администрированию Apache Airflow
• Опыт работы с Apache Superset или аналогичными BI-платформами
• Экспертиза в облачных платформах (AWS, GCP, Azure или OCI) включая IAM, networking и managed services
• Уверенная работа с Infrastructure-as-Code
• Опыт оркестрации контейнеров на Kubernetes и/или Docker в production
• Знание и опыт работы с DBT и OpenMetadata
• Экспертиза в SQL и моделировании данных
• Опыт работы с требованиями к безопасности и compliance
• Опыт применения AI-технологий для оптимизации процессов и принятия решений

Будет плюсом

• Магистрская степень в смежной области
• Опыт работы с cybersecurity-данными
• Участие в open-source проектах
• Знание machine learning пайплайнов

Условия

• Конкурентоспособная компенсация и пакеты equity awards на уровне рынка
• Комплексные программы физического и ментального wellness
• Конкурентивное оплачиваемое время отпуска и праздников
• Оплачиваемый декретный отпуск и отпуск по усыновлению
• Возможности профессионального развития для всех сотрудников
• Группы сотрудниц по географическим направлениям и волонтерские программы
• Вибрантная офисная культура с мировой amenities
• Сертификация Great Place to Work™ глобально

Навыки

• Python
• Apache Airflow
• Apache Superset
• Terraform
• Kubernetes
• Docker
• DBT
• OpenMetadata
• AWS
• GCP
• Azure
• SQL
• CI/CD
• Infrastructure as Code
• Data Modeling
• Data Security
• Compliance

Могут спросить на собеседовании

1. Как вы обеспечиваете надежность и отказоустойчивость Apache Airflow кластера в production-среде?
2. Опишите ваш подход к проектированию моделей данных с использованием DBT и их каталогизации в OpenMetadata
3. Как вы применяете Infrastructure as Code принципы для управления инфраструктурой данных? Приведите примеры использования Terraform.