Data Engineer( Кселл, АО )

18 Августа

Партнерские Вакансии

Город:

Алматы

Занятость:

Полная занятость

Компания "Кселл, АО"

Чем предстоит заниматься

  • Проектировать, развивать и оптимизировать платформы хранения и обработки данных (DWH и Data Lake)

  • Реализовывать надёжные, масштабируемые и повторяемые ETL/ELT-процессы

  • Интегрировать данные из различных источников (БД, API, файловые хранилища и др.)

  • Оптимизировать SQL-запросы и организацию хранения данных в соответствии с потребностями аналитики

  • Разрабатывать стриминговые процессы обработки данных на базе Apache Flink и Python

  • Внедрять лучшие практики в области качества данных, мониторинга и информационной безопасности

Что важно знать и уметь

  • Уверенные знания принципов построения архитектуры хранилищ данных (DWH) и многомерного моделирования

  • Продвинутый уровень SQL: оконные функции, анализ и оптимизация планов выполнения, стратегии соединений

  • Опыт работы с Hadoop/S3 и различными форматами хранения (Parquet, Avro, ORC)

  • Практический опыт использования Apache Airflow для оркестрации процессов

  • Навыки интеграции данных из PostgreSQL, Oracle, API, S3, FTP/NFS и других источников

  • Владение Python для написания скриптов и утилит

  • Уверенная работа в Linux-среде: bash, работа с логами, автоматизация, диагностика

  • Системное мышление и самостоятельный подход к решению задач

Будет плюсом

  • Понимание архитектуры Apache Kafka

  • Опыт работы с Apache Flink, знание Java на базовом уровне

  • Опыт использования Apache Spark

  • Знание принципов CDC и опыт работы с инструментами Oracle GoldenGate, Debezium

  • Навыки работы с Docker, Kubernetes, CI/CD и Git

  • Опыт построения отчётности и визуализации данных (Superset, Power BI и др.)

Похожие вакансии

13 Августа

Разработчик Data Quality

Алматы

Компания "Банк ЦентрКредит" Обязанности: - Разработка и настройка проверок качества данных в Informatica Data Quality (IDQ) - Создание,...

Отправить резюме подробнее

14 Августа

Менеджер по продукту( Kaspi Bank, АО )

Алматы

Компания "Kaspi Bank, АО" В нашу команду требуется Менеджер по Продукту по направлению развития и оптимизации Счета Kaspi Pay для партнеров....

Отправить резюме подробнее

14 Августа

Контент-менеджер( Kaspi Bank, АО )

Алматы

Компания "Kaspi Bank, АО" Миссия Kaspi.kz — создавать инновационные продукты и сервисы, которые улучшают жизнь казахстанцам. Если вы разделяете...

Отправить резюме подробнее

14 Августа

Инженер-механик( Международный Аэропорт Алматы, АО )

Алматы

Компания "Международный Аэропорт Алматы, АО" Основанный в 1935 году, Международный аэропорт Алматы — крупнейшие воздушные ворота Казахстана, а...

Отправить резюме подробнее

14 Августа

SMM-менеджер( БИСЕМБАЕВ А. Н. )

Алматы

Компания "БИСЕМБАЕВ А. Н." Что нужно делать: Ведение 2 страниц компании (Instagram, TikTok) Создание и публикация сторис, рилс и...

Отправить резюме подробнее

Вакансия размещена в отрасли

Информационные технологии / IT / Интернет: