DevOps engineer (Data Platform)

Мы в поиске DevOps инженера в направление данных и аналитики, который будет реализовывать большую миграцию инфраструктуры данных в облако, а также покрывать другие регулярные задачи по администрированию серверов, окружений совместно с командой.

Наш стэк:

• Хранилище в Oracle ~ 80TB
• Три кластера: Vertica ~ 15TB, Hadoop на основе Hortonworks (HDFS, HBase, Yarn, Hive, Spark2, Spark3, etc) ~ 1,2PB, Trino
• Jupyterhub
• Airflow
• CI/CD: Atlassian stack (Bitbucket, Bamboo)
• Мониторинг и алертинг: Prometheus, grafana
• Configuration Management: Ansible, Terraform
• Yandex Cloud

Чем предстоит заниматься:

• Развивать и поддерживать инфраструктуру платформы данных Lamoda;

• Администрировать сервера, обеспечивать отказоустойчивость и высокую доступность;

• Мигрировать сервисы из On-Premise инфраструктуры в Yandex Cloud;

• Взаимодействовать с командами Data Engineering, Data Science, аналитиками данных, System Ops;

• Настраивать мониторинг и алертинг серверов и сервисов;

• Администрировать нескольких окружений: Dev, UAT, Prod;

• Строить CI/CD;

• Разрабатывать Disaster Recovery Plan.

Мы ожидаем:

• Опыт администрирования Linux систем;

• Опыт администрирования СУБД (Oracle / Vertica / Greenplum / Postgresql / Clickhouse);

• Опыт администрирования стека Hadoop (HDFS, HBase, Yarn, Hive, etc);

• Опыт работы с облачной инфраструктурой Yandex Cloud / AWS / Azure / Google Cloud;

• Опыт работы с Ansible;

• Опыт работы с git, CI/CD-системами;

• Опыт работы с Docker;

• Опыт автоматизации, написания скриптов (Python, bash, Makefile, etc);

• Опыт работы в команде;

• Умение расставлять приоритеты и брать на себя ответственность.

Как плюс:

• Опыт работы с Terraform;

• Опыт администрирования кластеров Kubernetes.

Откликнуться

​