Data engineer
MSK | full time | от 200 т.р.
Всем привет!
В крупную нефтегазохимическую компанию ищем Data engineer или опытных разработчиков, желающих вырасти в Data engineer.
💼
Суть проекта
— развитие платформы данных как продукта.
🍪 Мы предлагаем:
— Возможность удаленной работы;
— Комфортный рабочий график с гибким началом рабочего дня;
— Оформление по ТК РФ;
— Современный стек и гибкие методологии разработки, работа в команде высококлассных профессионалов из разных технологических областей;
— Интересные и нестандартные задачи, которые требуют креатива и новых подходов, мы работаем в реальном секторе, наши пользователи - реальные люди;
— Корпоративные льготы: ДМС, льготное страхование родственников, большой выбор внутренних спортивных секций, скидки на абонементы сети World Class.
🧑🏻💻 Задачи:
— Развитие платформы данных, создание инструментов обработки данных;
— Участие в проектах с реальной ценностью для бизнеса компании;
— Загрузка данных из систем источников в узел данных и обеспечение их доступности;
— Автоматизация аналитических задач;
— Разработка и оптимизация алгоритмов операционного анализа данных;
— Развитие практик DevSecOps, автомтизация миграций и разработческих пайплайнов;
— Взаимодействие с аналитиками данных (data scientists), производственными и функциональными экспертами для определения требований к выгрузке, конвертации и представления данных.
🧩 Стэк: Python (Spark), Kafka, Hadoop, Vertica, Docker, Apache NiFi.
💁🏻♀️ Наши пожелания:
— Знание хотя бы 1 языка программирования (желательно что-то из Scala, Java, Python, C++/C#) на хорошем уровне: опыт разработки более года, есть примеры проектов или продуктов;
— Знание SQL, опыт работы с реляционными СУБД (Oracle, MySQL, PostgreSQL и пр.);
— Навыки проектирования и реализации системы сбора и обработки данных;
— Опыт работы с *nix системами;
— Управление кластером Hadoop как преимущество;
— Знание и умение работать с ETL/ELT инструментами, Apache NiFi (один из компонентов ядра узла данных) будет дополнительным плюсом.
✍🏻 Для связи:
@olga_chr
