Тимлид разработки DWH

Avito нанимает тимлида для разработки DWH. Удаленно (Москва). Руководство разработкой систем реального времени для антибота и антифрода, обогащения данных, CDC, аналитики рекламы и платформы Flink.

Обязанности: - Разработка систем реального времени для антибота и антифрода: обнаружение ботов и мошенничества с помощью потоковых эвристик, разработка новых сигналов - Разработка обогащения событий: создание операторов обогащения для событий кликов (геолокация, категории, атрибуты пользователя, метрики рекламы) - Разработка CDC и приема данных: создание пайплайнов для захвата изменений из БД и доставки данных в DWH в формате Apache Paimon - Разработка аналитики рекламы: расчет CTR, показов, отзывов с аукционов и маркетинговых конверсий в реальном времени - Разработка платформы Flink: управление Flink Kubernetes Operator, Helm-чартами, развертывание в нескольких ЦОД и регионах - Техническое руководство: установка архитектурных стандартов и помощь команде в развитии

Требования: - Глубокие знания Apache Flink или другого фреймворка потоковой обработки (Spark Streaming, Kafka Streams) - Опыт руководства командой разработки от 4 лет - Системный подход к управлению людьми (мотивация, развитие, адаптация) - Опыт работы с высоконагруженными производственными системами - Умение декомпозировать задачи и строить техническую дорожную карту - Понимание Apache Kafka и принципов распределенных систем Будет плюсом: - Опыт руководства платформенной командой без продакт-менеджера и системного аналитика

Формат работы: удаленно (Москва)