Application Developer – DevOps / Data Lake Engineer
Что предстоит делать
Мы ищем специалиста для участия в масштабном корпоративном проекте (Enterprise), связанного с облачной инфраструктурой, эксплуатацией Data Lake и обеспечением стабильной работы платформы. Ваша задача – администрировать и поддерживать Amazon EKS и Kubernetes‑кластеры, управлять EKS Node Groups, EC2‑инстансами, Auto Scaling Groups, pods, services и workloads. Вы будете настраивать доступ к S3, bucket policies, шифрование и подключение к Data Lake, а также поддерживать и устранять неполадки Apache Hive, Impala, Iceberg и Ranger. Работа включает управление метаданными Data Lake, изменение схем данных (schema evolution), snapshots и обслуживание таблиц. Вы будете мониторить доступность платформы, производительность, ёмкость и безопасность, анализировать и устранять инциденты в AWS, Kubernetes и Apache‑экосистеме. Автоматизация инфраструктуры и операционных процессов будет осуществляться с использованием Terraform, Helm, Python и Bash. Предпочтительно наличие опыта работы с Cloudera Data Platform (CDP) on Cloud, Cloudera Data Warehouse, Cloudera Data Engineering, Cloudera AI или Dremio Lakehouse.
Что мы ждём от кандидата
- Практический опыт работы с облачной инфраструктурой AWS, особенно Amazon EKS, Kubernetes и Data Lake на базе S3
- Знание Apache Hive, Impala, Iceberg, Ranger и связанных сервисов управления метаданными и каталогами
- Опыт работы с Infrastructure as Code и инструментами автоматизации: Terraform, Helm, Python, Bash
- Навыки устранения неполадок, мониторинга и администрирования облачных платформ
- Понимание принципов облачной безопасности, AWS IAM и управления доступом
О Deffic
Откликнитесь на сайте работодателя.