Senior Data Engineer
SPB or Remote | full time | до 400 т.р.
Наш партнер - Компания, которая разрабатывает систему аналитики на маркетплейсах в поисках Senior Data Engineer
Нужен человек, который умеет:
- Создавать batch и streaming pipeline-ы обработки данных
- Разруливание зависимостей потоков данных
- Оптимизация SQL запросов
- Тестирование и мониторинг качества данных
Нужно будет делать:
- Обрабатывать данные парсинга и создавать стабильные пайплайны с хорошей очисткой данных и контролем качества
- Интегрироваться с api маркетплейсов и создавать витрины на основе данных площадок и парсинга
Что мы ищем в тебе:
- Отличное знание SQL
- Знание python на уровне senior разработчика
- Хотя бы одно из, лучше все: athena/presto, spark, clickhouse, Trino
- Опыт работы с большими массивами данных
Желательно:
- Опыт решения аналитических задач
- Работа с luigi/airflow
- Опыт работы с облачным стеком
- Опыт работы с hadoop стеком
Что мы предлагаем:
- Конкурентоспособную “белую” зарплату
- Дистанционную работу по Московскому времени
- Участие в превращении старт-апа в большую компанию
- Погружение в быстрорастущую индустрию e-commerce
- Быстрый рост навыков (нужно будет делать быстро много нового, это большая нагрузка и быстрый рост)
Откликнуться/задать вопросы:
@SHARK_IT
