Data инженер

Remote | full-time

KazanExpress

KazanExpress — самый быстрорастущий маркетплейс в Европе родом из Иннополиса. Наша компания компания, работает в 115+ городах России. Каждый день мы принимаем от 100 000 заказов в сутки и помогаем более 5 миллионам пользователей находить нужные вещи быстро и удобно

Сейчас ищем Data инженеров уровня middle, senior и lead для следующих задач: 

- Улучшить CDC-процессы;

- Ускорить продуктивизации пользовательских витрин;

- Обеспечить высокое качество данных;

- Внедрить DataMesh практики;

- Построить Lake House с единой точкой входа для ad-hoc запросов.

Наш основной стек: 

Airflow, Clickhouse, Spark, PostgreSQL, Kafka Connect, Debezium, Kubernetes :

Какой нужен опыт и знания: 

Опыт работы с холодным хранилищем: 

- Spark / DeltaLake / Presto / Trino;

- Опыт работы с Airflow / Oozie или другими планировщиками и оркестраторами;

- Опыт разработки на Python / Java / Scala;

- Опыт работы с Kafka / ksqlDB / Apache Pulsar или другими распределенными платформами обработки потоков событий;

- Понимание того, как можно структурировать хранилище данных: Kappa / Lambda / DWH / Data Vault / Data Anchor / hNhM. 

ЗП вилка: отталкиваемся от ваших ожиданий

Контакты: @ElizaGabbas