Python Developer
Remote | full-time | 150 - 200 т.р.
Что нужно будет делать:
1. Краулер, собирающий данных с большого количества платформ и его мониторинг
2. ETL-процессы по обработке данных на AWS-lambda
3. Микросервисы на Dash, которые визуализируют заранее подготовленные данные из Clickhouse.
Наш стек технологий:
Dash+Docker - микросервисы
S3 + Athena + AWS-Lambda - большие данные
Postgres, Clickhouse, Redis - данные для работы сервиса
Grafana, Sentry, OpsGenie - мониторинг и алертирнг
Должен знать:
1. Python, библиотеки Flask, Pandas, Multiprocessing
2. Pytest опыт написания Unit-тестов
3. SQL: написание сложных запросов, агрегации и join, оптимизация запросов
4. Docker - базовый опыт работы
5. Git - опыт совместной разработки
6. Базовые знания фронта - HTML, CSS, JS
Желательно опыт работы с библиотеками:
Flask, Pandas, Dash - желательно опыт работы, понимание устройства
И с технологиями:
Docker, Nginx, S3, Athena(presto), AWS-Lambda, Clickhouse, Postgres, Redis, Grafana, Sentry, OpsGenie
Должен уметь:
1. Самостоятельно выполнять задачи длинной несколько дней
2. Работать с данными, валидировать что результат соответствует реальности
3. Оценивать задачи и попадать в сроки
4. Продумывать мониторинг и алертинг написанных компонентов
5. Отвечать за результат работы, в случае факапов на проде оперативно исправлять ошибки
Контакты:
@OMeshkova
