В Arenadata стартовал новый проект в области управления большими данными в облаках. Нам нужен Software Architect, специализирующегося на построении cloud-native сервисов на основе Spark и Hadoop. Мы ищем архитектора, который займется проектированием и разработкой платформы для построения Lakehouse, с использованием cutting-edge технологий.

Мы ждем, что вы:

Знаете принципы, паттерны и практики проектирования программных систем, умеете применять их на практике;
Владеете глубокими знаниями технологического стека хранения и обработки данных Datalake\Lakehouse на базе: Hadoop\Spark, S3, Iceberg\Delta\Hudi, Airfllow\Oozie\Dagster, Trino\Impala, Hue, JupiterHub, Knox, Ranger;
Понимаете cloud-native подход и инфраструктурные сервисы k8s, S3;
Знаете фреймворки проектирования архитектуры (например, TOGAF, Archimate и т.п.);
Знаете этапы жизненного цикла программного обеспечения (ПО), этапы управления проектами разработки ПО.

Будет плюсом:

Имеете опыт разработки PaaS-сервисов и опыт работы с облачными провайдерами;
Понимаете концепции ACID-транзакций в Lakehouse;
Понимаете принципы контроля доступа и безопасности данных;
Имеете опыт подготовки документации вида docs-as-code.