Детали вакансии
Разработчик EDW (ETL/ELT)
JETLYN ищет Старшего разработчика EDW (ETL/ELT) на удаленную позицию в России. Зарплата 190 000-220 000 рублей в месяц. Роль включает разработку конвейеров данных для платформы анализа данных в финтехе.
Мы разрабатываем платформу для анализа больших данных в финтехе и ищем инженера, который поможет масштабировать наше хранилище данных. Обязанности: Разработка конвейеров данных: Проектирование и реализация ETL/ELT процессов для загрузки и трансформации данных из различных источников; Пользовательские трансформации: Реализация сложной бизнес-логики и нестандартных трансформаций данных; Прототипирование и витрины данных: Проектирование и создание прототипов, создание витрин данных для аналитики и отчетности; Оптимизация и масштабирование: Анализ производительности существующих конвейеров, оптимизация SQL-запросов и структур баз данных, участие в масштабировании системы; Разработка на PL/pgSQL: Написание хранимых процедур, функций и триггеров для PostgreSQL; Архитектура DWH: Разработка архитектуры хранилища данных, анализ и выбор оптимальных технологий, методологий (Data Vault, Inmon, Kimball) и инструментов; Документация и знания: Создание и обновление базы знаний, технической документации и руководств для пользователей DWH.
Ключевые компетенции ETL elt Data Vault EDW Data Lake Опыт разработки ETL/ELT процессов не менее 2-3 лет; Уверенные навыки SQL и опыт оптимизации сложных запросов; Опыт разработки на PL/pgSQL (хранимые процедуры, функции, триггеры); Понимание методологий проектирования хранилищ данных: Data Vault, EDW, Data Lake; Опыт проектирования витрин данных и работы с большими объемами данных; Понимание принципов масштабирования и оптимизации производительности баз данных; Навыки документирования решений и передачи знаний команде. Будет преимуществом: Опыт работы с инструментами оркестрации: Apache Airflow, Luigi, Dagster; Знакомство с распределенными системами: Apache Spark, Hadoop, Kafka; Опыт работы с облачными платформами (Yandex Cloud, S3, ClickHouse, Greenplum); Знание Python/Java для разработки пользовательских трансформаций; Опыт внедрения процессов Data Quality и мониторинга конвейеров.
Формат трудоустройства: ТК/ИП Формат удаленной работы.
Не пропусти ни одну вакансию
Подпишись на наш Telegram-канал