Должность: Инженер-программист

Основные обязанности:

• Поддержка и развитие on-prem инфраструктуры для платформы данных:
• Apache Airflow
• Greenplum
• Docker
• Linux
• Разработка и автоматизация процессов CI/CD в GitLab.
• Администрирование Apache Airflow, PostgreSQL, Greenplum и вспомогательных сервисов.
• Обеспечение стабильной и безопасной работы инфраструктуры данных.
• Настройка мониторинга, логирования и алертинга для платформы.
• Управление SSL/TLS-сертификатами и доступами к сервисам.
• Участие в проектировании и внедрении новой Lakehouse-платформы:
• Ceph RGW
• Apache Iceberg
• Project Nessie
• Trino
• ClickHouse
• Развертывание и сопровождение сервисов потоковой обработки данных:
• Kafka
• Debezium
• Flink/Spark
• Внедрение Kubernetes для контейнерной платформы.
• Планирование вычислительных ресурсов и оптимизация производительности инфраструктуры.
• Автоматизация эксплуатации инфраструктуры с использованием Bash и Python.
• Взаимодействие с командами разработки и аналитики при реализации инфраструктурных проектов.

Место работы: г. Алматы, Бостандыкский район