Команда DE-infra занимается разработкой инструмента управления главного двигателя автоматизации в компании Ozon – Airflow, по модели Airflow as a Service, а также разработкой инструмента интеграции данных. Мы помогаем нашим пользователям разрабатывать пайплайны движения данных и предосталяем им окружение для работы. В процессе работы мы используем практики DevOps, разнообразные инструменты и технологии: Python, Kubernetes, Airflow, Hadoop, Spark, MySQL, PostgreSql, Vertica, ClickHouse, Prometheus, Hive, Kafka, Grafana, Git, Helm.


Наш стек:

— Python

— Vertica PostgreSQL, ClickHouse, Hive, MS SQL

— PySpark, HDFS

— Airflow (Celery Executor, k8s)

— Gitlab CI/CD, Kubernetes, Helm

— Prometheus, Grafana, S3

— FastApi

Вам предстоит:

— Управлять жизненным циклом интеграций (создание, изменение, удаление, контроль)

— Совершенствовать текущие и разрабатывать новые инструменты доставки данных

— Помогать нашим пользователям реализовывать их пайплайны

— Участвовать в развитии Data Quality и Data Observability

‍

Мы ожидаем:

— Уверенное владение Python

— Опыт работы с СУБД (Postgre SQL/MS SQL)

— Проактивность и огромное желание принести пользу

— Готовность работать полную неделю

‍

Будет преимуществом:

— Опыт работы с Airflow

— Опыт работы с PySpark

— Опыт работы с MPP (Vertica)

‍

Мы предлагаем:

— Возможность обучиться перспективной профессии на реальных задачах

— Систему наставничества и поддержку HR

— Динамичный и быстроразвивающийся бизнес, ресурсы, возможность вместе сделать лучший продукт на рынке e-commerce!

— Профессиональную команду, которой мы гордимся