Data Engineer

MSK | SPB | Hybrid | full-time |  250 - 350 гросс

 ООО Марс

Мы ищем Data Engineer в команду Data Management дата-офиса одного из направлений бизнеса.

Цель команды Data Management – внедрить процессы управления данными, а также практики и системы, которые позволят всей компании контролировать свои ресурсы в виде данных и управлять ими. Мы отвечаем за работу всего data-pipeline от исходной системы до отчета.

Мы используем современные подходы и технологический стек: Python, SQL, PySpark, Kafka, YCP, Airflow, NiFi, S3, Power BI, Yandex DataLens, Apache SuperSet.

Обязанности:

• Работать с витринами данных;

• Интегрировать источники данных в DataLake

• Обрабатывать потоковые данные (streaming)

• Контролировать качество загружаемых данных

• Проводить код ревью

• Отвечать за оптимизацию, рефакторинг и поддержку решений

Требования:

• Понимание работы СУБД и принципов построения хранилищ данных

• Опыт работы с Hadoop (Spark, HDFS, YARN etc.)

• Отличное знание SQL, Python/Scala/Java

• 1+ опыт работы с облачными платформами Yandex Cloud Platform/ Azure/ AWS

• Знание Git

• Английский на уровне intermediate и выше

Будет плюсом: 

• Опыт с Docker, Kubernetes

• Знание Nifi, Kafka, Airflow

Условия:

• Конкурентная зарплата, система бонусов, ДМС и страхование жизни с первого рабочего дня

• Ежегодный пересмотр заработной платы (с учетом рыночной ситуации и индивидуальной результативности сотрудника)

• Корпоративная пенсионная программа

• Компенсация питания

• Оплата мобильной связи

• Гибкий рабочий график

• Дополнительный оплачиваемый отпуск при стаже работы от 5 лет

• Насыщенная образовательная программа, которую формируете вы

Контакты: @leysanakch