Разработчик ETL / Data Engineer

Компания "Публичная Компания «Freedom Finance Global PLC»"

Проект:

• Мы активно развиваем корпоративное хранилище данных (DWH), с использованием BigData, в котором применяем ETL-процессы (сопровождение и развитие), с применением и поддержкой Apache Spark jobs

Задачи:

• Проектирование и разработка ETL-процессов для загрузки данных в хранилище;
• Разработка микросервисов обработки данных на Spark;
• Поддержка промышленной эксплуатации разработанных решений;
• Поддержка технической документации в актуальном состоянии.

Мы ожидаем от кандидата:

• Высшее образование, релевантный опыт от 3 лет;
• Понимание основных принципов построения хранилищ данных и ETL;

• Engineering: Apache Airflow, Apache Spark, PySpark;

• Базы данных: Oracle, Greenplum;

• Брокеры сообщений: Kafka, RabbitMQ;

• Системы контроля версий GitLab, Liquibase.

Стек:

• Python, SQL, Greenplum, Oracle, HDFS, S3

Мы предлагаем:

• Профессиональный коллектив;
• Неограниченный рост;
• Комфортный офис с лаундж-зонами и кафетериями;
• Скидки на фитнесс, обучение английскому языку, подарки на праздники и дни рождения;
• Бонусы и уникальные предложения от компаний холдинга;
• Спонсирование профессионального обучения;
• Насыщенная корпоративная жизнь с выездами на природу, праздничными мероприятиями в офисе, играми и розыгрышами подарков.

Открыть контакты работодателя

Зарегистрируйтесь или войдите, чтобы открыть контакты работодателя