Senior DWH разработчик

Микрофинансовая организация KMF(КМФ)

Город:

Алматы

Занятость:

Полная занятость

Компания "Микрофинансовая организация KMF(КМФ)"

Что делать?

Разработка и поддержка масштабируемых дата-пайплайнов с использованием PostgreSQL, Greenplum, Spark, Airflow и NiFi;
Оптимизация хранения, обработки и извлечения больших объемов данных;
Обеспечение качества, целостности и безопасности данных;
Сотрудничество с дата-сайентистами и аналитиками для поддержки аналитики и отчетности;
Мониторинг и улучшение ETL-процессов для повышения производительности и надежности;
Внедрение практик CI/CD для дата-инфраструктуры.

Если у вас:

5+ лет опыта в дата-инжиниринге;
Экспертиза в PostgreSQL и Greenplum для проектирования и оптимизации баз данных;
Владение Apache Spark для обработки больших данных;
Опыт работы с Apache Airflow для оркестрации процессов;
Практические знания Apache NiFi для интеграции данных и ETL;
Уверенные навыки программирования на Python;
Понимание моделирования данных, хранилищ данных и оптимизации SQL;
Опыт работы с инструментами CI/CD и системами контроля версий (например, Git).