DevOps-инженер (Big Data)

Стек на проекте: JupyterHub, RStudio, VS Code, Airflow, Mlflow, Apache Superset, Hue, Label Studio, LangChain и другие веб-сервисы. На Python написаны продукты и скрипты.

Вместе с нами тебе предстоит:

• Настраивать и совершенствовать CI/CD пайплайны;
• Поддерживать проекты на стеке k8s, Docker, Python, Postgres, Nginx, Redis;
• Развивать системы мониторинга и логирования на основе Prometheus, VictoriaMetrics, Grafana, Elasticsearch, FluentBit;
• Поддерживать и развивать внутреннюю инфраструктуру информационной системы: Jenkins, Gitea, Nexus, K8s, PostgreSQL, Redis;
• Автоматизировать рутинные задачи при помощи Python;
• Развивать и поддерживать функционал ИС в части Airflow, JupyterHub и Apache Superset;
• Устанавливать в ИС плагины, драйверы, пакеты, новые библиотеки Python и R.

Какие знания и навыки для нас важны:

• Опыт работы в качестве DevOps-инженера не менее 3-х лет;
• Знание языков Python и bash;
• Опыт работы с системами контейнеризации;
• Опыт администрирования Linux;
• Хорошее понимание систем мониторинга (Zabbix, Prometheus);
• Опыт работы с системами логирования (EFK);

Будет плюсом:

• Опыт работы со стеком Hadoop (Spark, Hive, HDFS);
• Опыт работы с GPU-устройствами;
• Опыт работы с JupyterHub, Rstudio;
• Опыт работы с Airflow;
• Опыт реализации систем с применением ML;
• Знание Apache Spark.