Детали вакансии

Ведущий инженер данных в VK Видео, Москва. Компания: Vk. Задачи: Разработка и поддержка процессов обработки данных, сбор витрин, написание адхоков. Требования: Опыт с Airflow, Spark, Hadoop, ClickHouse, YT, Python, Git.

Разрабатывать и поддерживать процессы обработки и доставки данных для аналитических и ML команд Собирать витрины, оптимизировать Писать адхоки и выгрузки, раздебаги Собирать требования

Понимание работы параллельных вычислений на кластере Опыт с Airflow, Spark, Hadoop, ClickHouse, YT (опционально) Знание Python: алгосы базовые (для понимания оптимального кода), классы и прочий сложный код (для чтения исходников и создания велосипедов типа операторов/сервисов) Знание Git и работа с кодом в команде (ревью)