Senior Data Engineer( ДОЧЕРНЯЯ ОРГАНИЗАЦИЯ НАРОДНОГО БАНКА КАЗАХСТАНА HALYK FINSERVICE )

ДОЧЕРНЯЯ ОРГАНИЗАЦИЯ НАРОДНОГО БАНКА КАЗАХСТАНА HALYK FINSERVICE

Город:

Алматы

Занятость:

Полная занятость

Компания "ДОЧЕРНЯЯ ОРГАНИЗАЦИЯ НАРОДНОГО БАНКА КАЗАХСТАНА HALYK FINSERVICE"

Halyk Market – электронная торговая площадка с большим количеством акций и привилегий как для клиентов, так и для партнёров.
Наша миссия – объединить покупателей и партнеров. Предоставить им надежное и удобное технологичное решение для совершения выгодных покупок online.
Наше видение – стать признанным лидером в online- коммерции в регионе. Мы руководствуемся принципами уважения к нашим партнерам и покупателям, искренней заботой о клиенте, надежностью технологичного решения, позволяющими нашим клиентам достигать успех.

На данный момент мы в поиске Senior Data Engineer для создания команды DWH, которая будет входить в Управление аналитики. Команда DWH будет заниматься построением аналитического хранилища данных по всем стримам Halyk Market. Нас ждет множество увлекательных и масштабных задач, включая централизацию и оптимизацию платформы для работы с данными, оптимизацию ETL процессов, работу с Kafka, Airflow, Superset и многое другое.

Обязанности:

Работа с DevOps и аналитиками по подготовке, загрузке и оптимизации данных;
Анализ первоисточников (PostgreSQL, ClickHouse, Kafka, API);
Разрабатывать и поддерживать ELT/ETL-процессы (Python, SQL, Airflow);
Оптимизация запросов (SQL);
Обеспечивать бесперебойную доставку данных (Airflow, SuperSet);
Вести документацию (Confluence).

Требования:

Опыт работы с базами данных;
Хороший уровень знания языка запросов SQL и Python;
Понимание как устроено хранилище данных и объектно ориентированного программирования;
Опыт работы с DevOps практиками (CD/CI, Docker/Kubernetes и др.).
Опыт работы с ClickHouse;
Опыт работы с Apache Airflow;
Понимание принципов работы веб-аналитики и сбора данных пользователей;
Написание запросов в NoSQL БД.

Условия: