Job Details

Data Engineering
Mid-level
Hybrid
Full time
Apr 21

Инженер данных Марс Гибрид, СПб

Инженер данных в компанию Марс, гибридный формат работы, Санкт-Петербург. Требуется опыт разработки пайплайнов данных в Apache Airflow и оптимизации приложений на Apache Spark. Владение SQL, Python/Scala/Java.

Разработка пайплайнов обработки данных в Apache Airflow. Оптимизация приложений на Apache Spark. Понимание работы СУБД и принципов построения хранилищ данных. Опыт работы с Hadoop (Apache Spark, HDFS, YARN etc.). Уверенное владение SQL, Python/Scala/Java.

Опыт разработки пайплайнов обработки данных в Apache Airflow. Опыт оптимизации приложений на Apache Spark. Понимание работы СУБД и принципов построения хранилищ данных. Опыт работы с Hadoop (Apache Spark, HDFS, YARN etc.). Уверенное владение SQL, Python/Scala/Java. Будет плюсом: Опыт работы с Apache Kafka, Apache NiFi. Наличие опыта оптимизации потребления ресурсов. Готовность участвовать в развитии лучших инженерных практик внутри компании.

Russia
Scala
Hadoop
Python
SQL
Apache Kafka
Apache Spark
Apache Airflow
Java
Apache Nifi

Don't miss a single job

Subscribe to our Telegram channel

Subscribe
Back to Jobs

Similar jobs

Data Engineering
On-site
May 12

Data Engineer

RUB 200,000

Data Engineer at BI Group, a leading developer in Central Asia. Salary from 200,000 RUB. Office-based in Astana. Requires over 3 years of experience in data pipelines, ClickHouse, Kafka, Airflow, DBT, SQL, Python, and data quality.

Kazakhstan
B
BI Group
Data Engineering
Remote
May 14

Data Engineer

Data Engineer at SayGames, a publisher and developer of mobile games. Focus on data pipelines, SQL optimization, and user data. Hybrid work format (Limassol, Paphos, Warsaw) with remote options. Flexible schedule.

S
SayGames
Data Engineering
Remote
May 10

Data Engineer

Data Engineer at Облако.ру, focusing on designing and developing data pipelines for cybersecurity event processing, normalizing security events, and optimizing analytical data storage. Remote position.

О
Облако.ру