Data Engineer в SeverX
Удаленно.от 250 000 руб.
Компания Sever X.Удаленно.💎Ключевая задача: поддержка и развитие Data Lake и связанных с ним проектов
💎Основные обязанности:
Интеграция с источниками данных и построение ETL-процессов
Разработка и поддержка аналитической отчётности
Выявление и устранение аномалий в данных
Технологический стек:
Основной язык разработки – Python 3.8
Платформа разработки – Яндекс.Облако (Managed Services + виртуальные машины)
Хранилища данных – GreenPlum 6.2, PostgreSQL 14, Redis
Оркестратор процессов – Apache Airflow 2.0
Система управления версиями – GitLab
Контейнеризация приложений – Docker + k8s
Обязательные требования
📌Уверенное владение SQL: базовый синтаксис, транзакции, представления, хранимые процедуры
📌Опыт интеграции с различными источниками данных: файловые системы (локальные/ftp/sftp), API, SQL и NoSQL базы данных
📌Понимание принципа работы распределённых баз данных
📌Знание Python 3: модули pandas, pyodbc (либо другие модули, имплементирующие ODBC), paramiko, requests
📌Базовые навыки использования Linux
Преимуществом при отборе будет
📌Опыт работы с распределёнными хранилищами данных: Hadoop (Hive/Impala), GreenPlum, ClickHouse
📌Опыт разработки пайплайнов на Apache Airflow
📌Навыки оптимизации процессов SQL
📌Опыт реализации RestAPI
В кандидате также важны
Лидерские качества
Умение говорить на языке бизнеса
🏡Условия работы
Место работы: удаленно
График работы: полная занятость, 5/2
Возможны различные варианты оформления
Рассматриваются кандидаты в часовом поясе максимум +5 часов к МСК
Обязательно наличие гражданства РФ
💰Вознаграждение
Размер оклада: от 250 000 руб.
квартальные премии в размере 30% от квартального оклада. Отклики @Ritttka1 c указанием вакансии.