Детали вакансии

JETLYN ищет Middle+/Senior Data Engineer на удаленную работу в России. Задача — миграция хранилища данных на S3 + Trino + ClickHouse, оптимизация SQL-запросов, интеграция данных из SAP. Зарплата 220 000–310 000 RUB/мес.

Ключевая задача отдела — миграция хранилища и архитектуры обработки данных с Apache Hive и Greenplum на современный стек: S3 + Trino + ClickHouse. Вы примете участие в проектировании, внедрении и оптимизации нового корпоративного хранилища данных (EDW), обеспечив бесшовный перенос бизнес-логики и аналитических процессов. Ключевые задачи: - Проектирование и реализация процессов миграции данных и ETL/ELT в новый стек (S3 → Trino/ClickHouse). - Разработка, оптимизация и рефакторинг сложных SQL-запросов для аналитики, отчетности и витрин данных. - Интеграция данных из систем SAP (HCM, ERP) и других корпоративных источников. - Обеспечение качества, консистентности и валидации данных после перехода на новую архитектуру. - Участие в разработке и поддержке архитектуры корпоративного хранилища данных (EDW).

Продвинутый уровень SQL (критичное требование: умение писать сложные запросы, оконные функции, оптимизация планов выполнения, работа с терабайтами данных). Уверенный опыт работы с экосистемой Hadoop: Hive, Spark. Опыт коммерческой эксплуатации или миграции Greenplum (или других MPP СУБД). Знание современных аналитических стеков: ClickHouse, Trino, работа с S3-хранилищем. Опыт проектирования и разработки EDW (Enterprise Data Warehouse). Понимание методологий анализа данных, построения витрин данных и метрик. Знание архитектуры данных и бизнес-процессов в SAP (модули HCM, ERP). Будет плюсом: - Владение Python для автоматизации, написания UDF и скриптов интеграции. - Опыт оркестрации пайплайнов в Apache Airflow. - Опыт работы с ETL-инструментами (включая SAS DI). - Знание Apache NiFi для потоковой передачи и маршрутизации данных. - Опыт использования Power Designer для DDL-моделирования и проектирования схем.

Тип оформления: ТК/ИП Формат: Удаленная работа Локация: Россия Гражданство: РФ