devops

ЦУМ, ТД

Data platform tech lead/DevOps/DataOps

С 01.11.2024 по настоящее время (3 месяца)

Bigdata/DWH/DLK/Analytics стек - Yandex Cloud,Apache Kafka,Debezium,CDC,Apache Flink,Apache Iceberg/Paimon, Apache Spark, Hive metastore, S3, k8s,ArgoCD,Gitlab,ClickHouse, JupiterHub - проектирование realtime data lake для департамента аналитики - реализация DLK c 0 в yandex cloud + k8s - создание/модификация helm чартов для основных компонент DLK - реализация ci/cd всех компонент gitlab ci + argocd - исследование подходов для эффективного взаимодействия существующего стека OLTP с realtime аналитикой - написание IaC terraform yandex cloud - поддержка и развитие аналитического Jupiter Hub - внедрение/поддержка/развитие аналитического Apache Spark

ЦУМ, ТД

Data platform tech lead/DevOps/DataOps

С 01.11.2024 по настоящее время (3 месяца)

Bigdata/DWH/DLK/Analytics стек - Yandex Cloud,Apache Kafka,Debezium,CDC,Apache Flink,Apache Iceberg/Paimon, Apache Spark, Hive metastore, S3, k8s,ArgoCD,Gitlab,ClickHouse, JupiterHub - проектирование realtime data lake для департамента аналитики - реализация DLK c 0 в yandex cloud + k8s - создание/модификация helm чартов для основных компонент DLK - реализация ci/cd всех компонент gitlab ci + argocd - исследование подходов для эффективного взаимодействия существующего стека OLTP с realtime аналитикой - написание IaC terraform yandex cloud - поддержка и развитие аналитического Jupiter Hub - внедрение/поддержка/развитие аналитического Apache Spark

Вайлдберриз, ООО

Senior DevOps/DataOps engineer

С 01.01.2024 по 01.11.2024 (10 месяцев)

Bigdata/DWH/Analytics стек - Hadoop,Hive,Spark,Airflow,Iceberg,S3,Trino, MLFlow - Внедрил и поддерживал инфраструктурные процессы обработки данных в рамках DWH,DataLake - Перевел департамент аналитики из с adhoc запросов на железках в high intensive production k8s кластер - внедрил и обслуживал multi-env/multi-regional airflow для департамента аналитики в k8s - внедрил дашборды/метрики/алерты для всех компонентов связанных с data пайплайнами департамента аналитики и отдела DataGovernance - внедрил и поддерживал openmetadata для отдела качества данных - написание развесистых пайплайнов по сборке/тестированию/доставке приложений как в k8s так и on-premise - поддерживал/развивал как инфраструктурные так и data centric инструменты под-отдела аналитики DataQuality/DataGovernance - внедрение/поддержка MLFlow компоненты и ci/cd процессов для ml инженеров

Мобильные ТелеСистемы (МТС)

Senior DevOps engineer

С 01.12.2023 по 01.01.2024 (1 месяц)

Bigdata стек - kafka/k8s/argocd/gitlab-ci/java микросервисы - поддержка существующего решения - создание и модификация ci/cd пайплайнов gitlab-ci - поддержка микросервисов в k8s - написание/модификация helm charts и деплоя всего этого в k8s - оптимизация/создание развернутой системы dockerfiles - создание модификация ansible плейбуков

Provectus outsourcing solutions(MLOps/Dataqa)

DevOps/AWS SA

С 01.02.2022 по 01.09.2023 (1 год 7 месяцев)

- Building IaC from PoC for client specific massive infrastructure product - Integrating IaC approach to ML client's projects - CI/CD devlopment from scratch to multi-projects pipelines - terraforming infrastructure for multi-project pipeline(connecting different products from different clouds and various departments) - Incremental updates and releases for Data Quality infrastructure(building terraform modules)

Provectus outsourcing solutions(Imvu)

DevOps/DevOps SA for cloud automation

С 01.02.2021 по 01.02.2022 (1 год)

- Design higth intensive aws based cloud solutions - Building and supporting python 3.7+ solutions - Moving old, hand-supported solutions to AWS cloud and integration to the company-wide pipelines - Terraform/Cloudformation IaC - Building and automation of service mesh - Seting up deployments and provisioning infrastructure to AWS Cloud - Infrastructure monitoring and alerting setup for cloud applications - Writing IaC playbooks and support documentation

Provectus Internal Cloud

DevOps/Software engineer/AWS SA

С 01.02.2020 по 01.02.2021 (1 год)

- Design higth intensive aws based cloud solutions - Building and supporting python 3.7+ solutions - Integrating developer's solutions to CI/CD pipelines(github-ci, gitlab-ci, jenkins) - integrating qa automation to CI/CD - building terraform/cloudformation IAC platform. - move shell automation to python/ruby

Provectus

Software Engineer

С 01.07.2015 по 01.02.2020 (4 года 7 месяцев)

projects: Getparcel(getparcel.ru)(SOA) - same day delivery service for eCommerce Some typical tasks I want to point: - async images downloader gem with celluloid(https://github.com/Olefine/image_fetcher) - gem for sms sending(https://github.com/provectus/devinotele_rest) - I added ability to download reports in xlsx - Improve order filtering for couriers (node.js) - Service for generation and sending fiscal documents to customer - Development log system in SOA(each service has agent that sends business logs into master log service(redis), where logs grouped by types, forwards to another service that can parse and save structured logs into HBase on top of hdfs. This service was written in scala + akka(not yet released), the purpose of this service is to analyse order's common flow, from order creation to delivery. Next step is write spark jobs for build analytic platform) - Development token-based authorization system for popular cms - Another common tasks related to rails flow A set of technologies - [ruby, rails 4, nodejs, mongodb, websockets, js/coffee/es6, sidekiq, scala, hadoop, hbase, redis, rabbitMQ, CircleCI, rspec]

Ninthdecimal

Application Engineer

С 01.01.2016 по 01.01.2020 (4 года)

Developing ruby based web project to allow users interact with data platform, data services, google doublegeocoding, google dfp(ruby, rails, coffee, python, async computations, paracel DW reporting, mysql, git) Developing high available dashboard that displays sql/spark based reports (ruby, rails, async computations, mysql, git, d3js) Inventing and implementing approach to test massive ETL piplenes(mysql, paracel/redshift, spark, log based analytics, scala, python) Working on developing framework for testing spark streaming jobs(spark streaming, scala, python, akka, akka cluster) Developing hobby project that allow developer process and do some analytics for big files, one of the key feature is automatic cluster scaling when user need process files more then RAM available(EC2, S3, akka, akka cluster, scala, mqtt)

IQ300

fullstack web developer

С 01.08.2014 по 01.07.2015 (11 месяцев)

Разработка, тестирование. Развитие и поддержка собственной системы интеллектуального кеширования пользовательской активности. Активная работа как с фронтенд частью, так и с бекендом. Разработка бизнес логики.

стартап Svadba.org

программист Ruby on Rails

С 01.02.2013 по 01.08.2014 (1 год 6 месяцев)

Поддержка и написание тестов для текущей версии проекта, добавление функционала. Подготовка к production. Быстро влился в существующий проект, и начал писать код. Стремлюсь выделить ключевые задачи в gemы

undev.ru

junior web developer

С 01.11.2013 по 01.12.2013 (1 месяц)

разработка веб приложений, работа по улучшению качества написанного кода.

Университет

Филиал Казанского (Приволжского) федерального университета в г. Набережные Челны

Родной язык

Русский

Иностранные языки

Английский

Ключевые навыки

• Version control/git

• Sql postgresql

• Html5, css3, jquery, flex, бэм, git, gulp, scss, sass, javascript, пиксель перфект;

• Python\ ruby\ java\javascript

• design patterns

• agile project management

• Rest, gitlab, ci/cd, reactjs, redis

• Администрирование серверов linux

• Ms sql

• Разработка на scala

• Play, akka-http, akka-streams, monix, cats, phoenix

• .net, c#, ef, postgresql, k8s, gitlab, kibana, grafana

• Azure devops server

• Amazon aws

• Node.js, typescript/javascript, react, kubernetes, docker, ansible, github/gitlab, terraform

• dynamodb

• Aws lambda

• vpc/networking

• React helmet

• cloudwatch

• Навыки работы с docker/docker-compose

• Gitlab ci/cd

• Тестирование rest api

• apache spark

• Знаком с python

• apache iceberg

• Kubernetes, minio, docker, sonarqube, prometheus + alertmanager + grafana, jenkins, argocd, atlassia

• dlk

• Docker / kubernetes

• apache flink

Дополнительная информация

Кратко о навыках: - знание стека tcp/ip - продвинутый пользователь *nix - работа с внешними api(twitter/facebook/vkontakte/instagram/github/foursquare) - опыт разработки JSON API - понимание работы современного веб-сервера - понимание что такое REST архитектура - понимание таких слов как SOLID, GRASP - опыт работы с фоновыми задачами(resque/sidekiq/delayed_job) - опыт работы с системами контроля версий(git, расширение gitflow) - опыт работы в команде - в свободное время оглядываюсь по OS проектам на гитхабе - не пишу код от балды, в работе использую паттерны и best practices - могу поднять и сконфигурировать виртуалку/сервер/k8s кластер Ключевые слова: - OOP, design patterns - scala/java/python/ruby - postgresql - redshift/snowflake - redis - mongodb(начальный уровень) - websockets - GithubCi, GitlabCi, Jenkins,ArgoCD - Terraform, Cloudformation - AWS - Apache Kafka, Spark, Iceberg, Paimon - Kubernetes Что я жду от работы: - Четкое разграничение задач в команде - Предпочтение agile или смешанных технологий гибкой разработки - Big Data стек - не рассматриваю работу в SRE департаменте с дежурствами - расматриваю только проектные команды, т.е никаких департаментов девопсов/сисадминов/инфраструктурных инженеров