Мы Stepik - крупнейшая образовательная платформа, где пользователи могут как учиться, так и учить других. Также мы делаем второй проект Hyperskill - англоязычную платформу, с помощью которой любой желающий может на практике изучать программирование на Java, Kotlin и Python.
Сейчас вся работа с данными сильно завязана на backend (Django). Мы хотим, чтобы Data Engineer в первую очередь занялся построением пайплайнов (Airflow), собирал, отправлял и мониторил данные, а затем занялся разделением дата инженерии и backend совместно с коллегами.
Основные задачи:
Заниматься созданием, поддержкой и оптимизацией инструментов для использования нашей командой;
Развивать и автоматизировать ETL процессы;
Оптимизировать неэффективные запросы;
Настраивать мониторинг;
Постоянно учиться новому.
Мы ожидаем от кандидата:
Продвинутое знание Python;
Разработка ETL – pipelines на Python и SQL;
Знание и использование Airflow;
Высокий уровень ответственности;
Самостоятельность и предложение решений в сложных ситуациях;
Готовность к релокации.
Плюсом будет:
Опыт работы с Nginx, MySQL, ClickHouse, Redis, RabbitMQ
Опыт работы с Kubernetes
Опыт работы с CI/CD системами (TeamCity)
Стэк технологий проекта:
Знание Clickhouse
Знание Tableau, Superset
Знание Django
Мы готовы предложить:
Шанс изменить мир с помощью образования
Удаленную работу с гибким графиком из любой точки мира
Безлимитные отпуски
Отправляйте ваше резюме на join@stepik.org с названием Вакансии в теме письма. Будем рады познакомиться.
Мы всегда рады новым знакомствам! Если вы не нашли подходящую вакансию, но хотите с нами сотрудничать, присылайте резюме, описание себя и своих проектов на join@stepik.org.