data engineer

Частная компания Qala AI Ltd

Data engineer

С 01.04.2024 по настоящее время (1 год 2 месяца)

Оптимизация процессов хранения и обработки данных. Разработка ETL-джобов с учетом требований и регламентов. Управление workflow в Airflow: создание задач, DAG-ов и графов выполнения. Работа с различными СУБД: PostgreSQL, Impala, Oracle, ClickHouse, Vertica. Опыт парсинга и трансформации данных из форматов JSON и XML с использованием Python, с акцентом на эффективное извлечение данных и их сохранение в реляционных базах данных

Частная компания Qala AI Ltd

Data engineer

С 01.04.2024 по настоящее время (1 год 2 месяца)

Оптимизация процессов хранения и обработки данных. Разработка ETL-джобов с учетом требований и регламентов. Управление workflow в Airflow: создание задач, DAG-ов и графов выполнения. Работа с различными СУБД: PostgreSQL, Impala, Oracle, ClickHouse, Vertica. Опыт парсинга и трансформации данных из форматов JSON и XML с использованием Python, с акцентом на эффективное извлечение данных и их сохранение в реляционных базах данных

Kaspi Bank, АО

Data engineer

С 01.11.2023 по 01.04.2024 (5 месяцев)

- Подготовка данных для бизнеса - Партиционирование и индексация таблиц - Оптимизация запросов и процедур - Сбор данных с источников DWH - Анализ данных - Работа с ETL процессами

АО КазМунайГаз

Специалист сектора BigData

С 01.04.2021 по 01.11.2023 (2 года 7 месяцев)

Сбор и обработка данных Создание процедур для миграции и синхронизации данных на Postgresql Создание и изменение таблиц в базе данных на Postgresql Ведение и заполнение документации в You Track Работа с Airflow, Druid Создание витрин на Apache Spark SQL Работа с git, gitlab Использование технологии Liquibase

Smart Lab

Frontend-разработчик

С 01.03.2021 по 01.04.2021 (1 месяц)

• Верстка макетов на Vue.js • Сбор данных • Визуализация данных

Университет

Казахстанско-Британский технический университет

Университет

Satbayev university

Родной язык

Русский

Иностранные языки

Английский

Ключевые навыки

• Sqlite

• Знание git

• Sql postgresql

• Понимание принципов ооп

• Знаком с python

• Go, grpc, gitlab, k8s, postgres, clickhouse, oracle, kafka

• Apache spark

• Исследовательский анализ данных

Дополнительная информация

Опытный и целеустремленный профессионал с высокой степенью ответственности. Обладаю хорошими коммуникативными навыками, решая задачи в коллективе. А также дата-инженер с глубоким пониманием обработки данных и опытом в построении эффективных пайплайнов.