Детали вакансии

Top Selection ищет Инженера платформы данных / Big Data SRE (Linux) на проектную работу. Middle+|senior грейд, полная занятость, долгосрочно. Ставка: 256К-280К RUB. Локация: РФ. оформление: только ИП.

Эксплуатация и развитие крупной корпоративной платформы данных в промышленной компании. Задачи: Эксплуатация и развитие платформы - Администрирование и поддержка Data Platform (Arenadata DB / Greenplum, Kafka, ClickHouse) - Управление кластерами хранения и обработки данных - Настройка и поддержка отказоустойчивости (HA), репликации, балансировки - Управление обновлениями, патчами, релизами Kafka и потоковые данные - Администрирование Kafka кластеров (топология, партиционирование, репликация, retention) - Тюнинг producer/consumer, работа с lag и производительностью - Поддержка streaming ETL и пайплайнов инжеста Интеграции и работа с данными - Интеграция платформы с DWH, BI и ML системами - Поддержка и развитие контуров передачи и обработки данных между системами - Участие в обеспечении стабильности data pipelines Производительность и надежность - Мониторинг платформы (Prometheus, Grafana, ELK/OpenSearch) - Анализ производительности (SQL, storage, network) - Оптимизация запросов и работы кластера - Реагирование на инциденты (L2/L3), поиск корневых причин (root cause analysis) Инфраструктура и автоматизация - Автоматизация эксплуатации (Bash / Python / Ansible / Terraform) - Разработка CI/CD для data инфраструктуры - Управление конфигурациями (Infrastructure as Code) Интеграции и доступ - Интеграция с DWH, BI и ML системами - Настройка RBAC и разграничение доступа Доступ и безопасность - Настройка RBAC и разграничение доступа

- Опыт администрирования Data Platform / Big Data / DWH от 3 лет - Уверенное знание Linux (RHEL/CentOS/Ubuntu) на уровне системного администрирования - Практический опыт эксплуатации продакшн кластеров: Arenadata DB / Greenplum (или аналоги MPP систем), Apache Kafka (обязателен опыт администрирования, а не только использования), ClickHouse - Понимание распределенных систем: репликация, партиционирование, отказоустойчивость, сетевое взаимодействие (TCP/IP), хранение данных - Опыт работы с: архитектурой PostgreSQL / Greenplum, оптимизацией SQL-запросов - Практический опыт работы с Kafka: настройка топиков и политики хранения, работа с репликацией/партиционированием, тюнинг производительности producer/consumer - Навыки автоматизации: Bash и/или Python, Ansible и/или Terraform - Опыт мониторинга: Prometheus, Grafana, ELK / OpenSearch - Опыт управления инцидентами: L2/L3 поддержка, поиск корневых причин Желательно: - Docker / Kubernetes - Hadoop ecosystem - Spark / Flink - Airflow - Опыт работы с высоконагруженными enterprise DWH - Опыт работы в индустрии / телеком / финтех

Ставка: от 256К до 280К RUB Тип оформления: только ИП Загрузка: полная занятость Срок: долгосрочно