Senior Data Engineer

Удаленка

Ищем талантливого Data Engineer в команду Analytics Core, который сможет не только быстро влиться в команду, но и свежими взглядом посмотреть на наши амбициозные задачи! Если ты инженер с опытом работы в построении DWH, внимательный и самоходный, то мы уже ждем твое резюме в Skyeng! Skyeng — не только крупнейшая EdTech-компания в СНГ, но и трендсеттер в онлайн-образовании. Каждый год запускаем новые проекты, конкурируем за внимание детей и взрослых с Netflix, Facebook и YouTube и растём семимильными шагами 😌 В Analytics Core мы занимается разработкой и построением нового корпоративного хранилища данных для 100+ аналитиков компании: реализуем ELT-процессы по модели и спецификациям от команды архитектуры, дорабатываем движок под задачи модели данных и параллельно преодолеваем другие челленджи!

Твои задачи

Your tasks

  • Разработка собственных компонентов Airflow;
  • Проектировать и разрабатывать ETL/ELT процессы;
  • Разрабатывать системы хранения и обработки данных;
  • Мигрировать с текущей платформы обработки данных на новую;
  • Участвовать в разработке API для интеграции DWH с различными сервисами;
  • Разрабатывать, строить и обслуживать инфраструктуру работы с данными.

Идеальный кандидат

The ideal candidate

  • Не менее двух лет работал на аналогичной должности;
  • Уверенно владеет Python и SQL;
  • Уже не раз разрабатывал ETL/ELT процессы;
  • Имеет опыт построения DWH;
  • Работал с распределенными системами;
  • Умеет собирать, обрабатывать и преобразовывать данные;
  • Понимает подходы по обеспечению Data Quality;
  • Умеет работать с различными СУБД (и с колоночными, и со строковыми);
  • Умеет и любит автоматизировать рутинные процессы.

Мы работаем на стеке технологий:

  • Python 3;
  • Amazon AWS, Selectel, OS Linux;
  • Airflow 2.0, S3, Greenplum;
  • Docker, Docker Compose, Swarm;
  • MySQL/PostgreSQL/ClickHouse.

Плюсом будет

the advantage will be

  • Опыт работы с MPP СУБД;
  • Опыт работы с Kafka и Spark;
  • Опыт моделирования данных;
  • Опыт работы с pandas и numpy;
  • Опыт работы с BI системами;
  • Владение на базовом уровне DevOps-стеком: bash, git, CI/CD, Jenkins.

Преимущества вакансии

Pros of the position  

  • Ты будешь работать над социально значимым продуктом: мы меняем образование и достигаем в нашей работе «вау-эффекта».
  • Ты сможешь работать удаленно из любой точки мира. Если же тебе захочется познакомиться лично, то двери большого и уютного офиса в Москве или любого из 10 коворкингов в городах России всегда открыты для тебя!
  • Ты будешь учиться за наш счёт: мы составим персональный план твоего развития, и ты сможешь работать с коучами и менторами, участвовать в тренингах по публичным выступлениям, а также получишь доступ к 100+ курсов в нашем корпоративном университете 🔥 
  • Мы предоставим тебе ноутбук и любую другую необходимую для работы технику и поможем её настроить;
  • Удобные рабочие инструменты, которыми мы пользуемся (Slack, Zoom, G Suit, Jira, Confluence), помогут тебе легко разграничить личное и рабочее пространство;
  • Ты сможешь пользоваться нашими внутренними сервисами: ассистенты возьмут на себя рутинные простые задачи, а контент-продакшн сделает текст, видео или дизайн по твоему заказу. 
  • Ты получишь скидки до 50% на продукты компании для себя, твоего друга или ребенка.
  • Ты сможешь заниматься йогой на русском и английском вместе с коллегами онлайн!