Детали вакансии

Инженер данных в Облако.ру. Обязанности включают проектирование и разработку конвейеров данных для обработки событий кибербезопасности, нормализацию и обогащение событий безопасности, а также проектирование/оптимизацию аналитических хранилищ данных.

Проектирование и разработка конвейеров данных для обработки событий кибербезопасности; Нормализация и обогащение событий безопасности; Проектирование и оптимизация аналитических хранилищ данных (ClickHouse / StarRocks / аналоги); Подготовка витрин данных для быстрых запросов и аналитики; Эксплуатация сервисов данных в Kubernetes: развертывание, ресурсы, отказоустойчивость, масштабирование; Обеспечение наблюдаемости и качества данных (метрики, алерты, replay/backfill); Участие в анализе инцидентов и оптимизации производительности платформы данных.

Опыт построения и эксплуатации конвейеров данных (ETL, ELT и/или streaming) в продуктовом окружении; Уверенное владение SQL, включая оптимизацию запросов и анализ производительности; Опыт работы с OLAP СУБД (ClickHouse/StarRocks/Druid/Pinot или аналоги); Понимание принципов обработки потоков данных (идемпотентность, дедупликация, обработка ошибок); Опыт проектирования и оптимизации витрин данных и схем хранения; Уверенное знание Kubernetes и опыт эксплуатации сервисов в продуктовом окружении; Понимание принципов надежности, масштабирования и наблюдаемости систем данных.