Lead Back End / Data Engineer / Architect
Remote | Full-time | 2500-5000$
Привет! Мы - Rocketcompute.com , сервис оптимизации облачных инфраструктур для высоконагруженных расчётов.
Мы прошли самый топовый акселератор для b2b-проектов в Кремниевой долине — Alchemist и развиваемся на западных рынках.
Мы применяем могучий AI (Искусственный интеллект) к телеметрии поведения серверов под различными нагрузками, выявляем проблемы с производительностью и даём рекомендации, какую конфигурацию использовать для того, чтобы сократить расходы, либо ускорить вычисления. В среднесрочной перспективе мы строим полноценную рекомендательную систему для IaaS.
Мы ищем надежного боевого товарища в наш проект, чья основная задача - построение архитектуры нашего сервиса. Эта позиция с возможностью дальнейшего развития в CTO проекта, поэтому мы ищем человека, у которого горят глаза также как наши.
Что предстоит делать:
Overall ML backend:
- Проектировать, внедрять и поддерживать горизонтально масштабируемую и отказоустойчивую инфраструктуру для потоковой обработки и хранения данных с их последующим использованием в машинном обучении
Data and ML Engineering:
- Разработка и управление конвейерами ETL (сейчас используем Airflow) между многочисленными генераторами данных (клиенты, и внутренние NoSQL БД такие как InfluxDB) и долгосрочным хранилищем (сейчас AWS S3)
- Помощь группе дата-сайнтистов в создании конвейеров автоматизирующий предобработку данных и машинное обучение
- Интеграция результатов машинного обучения в финальный продукт
Что нужно уметь
Минимальные требования:
- Свободно владение Python, а также одним из следующих компилируемых языков (Java, Scala или Go)
- Опыт работы с NoSQL
- Опыт облачной разработки (микросервисы, docker, kubernetes):
- Распределенных облачный backend систем или создания масштабируемых систем хранения и обработки данных
- Глубокое понимание и практический опыт работы с продуктами AWS
- Знание английского языка на уровне Upper Intermediate и выше
Желательно иметь практический опыт с:
- CI / CD и разработкой через тестирование
- Потоковыми решениями (например, Kafka, Spark, Flink или аналоги)
- Оркестраторами рабочих процессов (например, Airflow, Argo)
- Альтернативными облачными провайдерами (GCP, Azure и т.д.)
Идеальный кандидат имеет:
- Опыт проектирования масштабируемых распределенных систем потоковой обработки данных
- Опыт проектирования систем сбора и хранения больший данных
- Опыт интеграции результатов машинного обучения в продукт и вывода их в продакшен
Условия и преимущества
- Глобальный продукт в международной компании
- Зарплата в долларах США
- Возможность релокации за рубеж в будущем (и при желании)
- Звездная команда выпускников МФТИ и ММ МГУ. Все фаундеры разбираются в том, что они делают и любят свое дело
- Удаленная работа
- Потенциал роста до позиции СТО
- Опцион после испытательного срока
Контакт:
@maximvolkov89
