Программист-разработчик Spark, Scala, PySpark
Оплата не указана
Вакансия находится в архиве
г. Москва
Требуемый опыт работы
От 1 года до 3 лет
Тип занятости
Полная занятость
График работы
Полный день
Вместе с нами ты будешь:
- участие в проектах связанных с хранением, обработкой и анализом данных в роли разработчика
- разработка приложения для построения витрин данных с использование фреймворка Apache Spark
- оптимизация и доработка текущих приложений написаных на Apache Spark
- взаимодействие с заказчиками и аналитиками в процессе проектирования и реализации задач
- разработка пайплайнов загрузки данных в Airflow
Какие знания и навыки для нас важны:
- высшее образование (Техническое/ИТ)
- опыт работы с Apache Spark
- опыт разработки на Scala
- опыт работы с Hive, Hadoop, Airflow
- опыт работы с реляционными базами данных (Mysql/Oracle/Postgres/DB2)
- знание SQL
Будет преимуществом:
- понимание подходов ETL/ELT
- опыт работы с NiFi, Informatica
- опыт работы очередями ActiveMQ, RabbitMQ, etc
- опыт работы с Apache Kafka
- опыт работы с потоковой обработкой данных (Kafka Streaming, Spark Streaming, Flink)
- опыт работы c инструментами CDC (IBM CDC, Debezium)
- опыт интеграции систем
Ключевые навыки
Контактная информация
ООО Иннотех | Большие данные
Сайт: не указан
Почта: не указана
Вакансия опубликована 29.01.2024 в г. Москва.
Похожие вакансии
от 130 000 ₽
Санкт-Петербург
Академическая
Полный день
Разработка программного обеспечения на С++ по одному из направлений:
- Разработка графического интерфейса пользователя ПО для средств подавления каналов радиосвязи и радионавигации.
- Разработка низкоуровнего интерфейса взаимодействия с аппаратной частью (платы ПЛИС), реализация объектных моделей С++ для работы с ПЛИС. Сетевое взаимодействие. Google ProtoBuffer...
22 марта
Не указана
Краснодар
Удаленная работа
В компанию Speed5 требуется разработчик специализирующийся на платформе .Net.
Наша компания является быстрорастущим интегратором СРМ систем.
Сферы интересов - банки, бюджетные организации, мед-центры. Работаем только с корпоративным сегментом рынка...
14 июня
Не указана
Москва
Удаленная работа
- Разработка и развитие набора серверных решений, обеспечивающих полное покрытие процессов планирования, проектирования, строительства и бурения скважин;
- Участие в формировании окончательных требований, проектирование и реализация новых модулей, поддержка и развитие существующих модулей...
18 апреля