Data разработчик

Remote | 230 - 356 т.р. net

Ekleft (финтех)

Формат работы: удаленный только по РФ

Оформление: штат/ИП

Грейд: Middle - Senior

О проекте: 

Мы, команда DWH платформы, отвечаем за переход хранилища банка на новый технологический стек. 

Мы занимаемся разработкой собственного движка ETL на базе Apache Airflow и Spark. Внедряем свои и пилотируем вендорские BI решения. Настраиваем Greenplum и Clickhouse.

Исследовательские задачи занимают 50 процентов нашего времени. Мы не боимся новых технологий и инструментов. 

Мы ориентированы на результат и держим в фокусе конечную цель исследований.

Мы открыты новому и любим учится. 

Наш стек: 

-Runtime: Kubernetes (self-hosted), Airflow, Spark

-БД и очереди: Greenplum, Oracle, Clickhouse, Kafka

-CICD: Bitbucket, Teamcity, Nexus

-Мониторинг: Grafana/Zabbix

-BI: Apache Superset

Задачи:

-Проектировать, разрабатывать и поддерживать оркестратор на базе Apache Airflow;

-Участвовать в выборе используемых технологий и компонентов;

-Внедрять и сопровождать технические решения;

-Автоматизация сервисов (мониторинг, работа с тейблспейсами, создание учетных записей и проч);

-Писать техническую документацию разрабатываемых решений;

Мы ищем специалиста, у которого в опыте:

-Уверенное владение Python (backend на Flask);

-Опыт работы с Docker;

-Опыт работы с Kubernetes (на уровне создания/конфигурирования приложения в кластере);

-Опыт работы с Teamcity (создание/управление CI/CD процессами);

Будет плюсом:

-Опыт работы с СУБД;

-Знание Bash;

-Опыт работы с большими данными: Hadoop, Spark, Kafka;

Контакты: @AnyaSechkova