Дата-инженер в В2В-направление Лавки

Яндекс Лавка B2B — это новый проект внутри Лавки, в рамках которого мы продаём технологии Лавки как сервис для иностранных B2B-партнёров. Наша служба управления данными с нуля создаёт модуль хранилища данных и отчётности.

Развитие хранилища данных
Вы будете создавать с нуля хранилище данных для продукта B2B на облачных технологиях обработки и хранения данных, оптимизировать нетривиальные ETL-процессы обработки больших данных.

Обеспечение стабильного расчёта бизнес-метрик
Совместно с командой аналитиков вам предстоит работать с данными на каждом этапе их трансформации: от появления информации в конкретном источнике до отображения в BI.

Задачи по оптимизации
Наша команда поддерживает и модифицирует созданные решения, чтобы обеспечить доступность сервиса и корректность данных для принятия решений.

• Уверенно программируете на Python
• Хорошо знаете Python и понимаете устройство современных реляционных баз данных
• Разрабатывали ETL-/ELT-процессы и проектировали хранилища данных
• Разбираетесь в классических алгоритмах и структурах данных.
  Будет плюсом, если вы
  Знакомы с облачными технологиями обработки и хранения данных Snowflake, Databricks, Redshift, BigQuery
• Знакомы со стеком технологий Hadoop, Spark, Hive
• Работали со специализированными аналитическими базами данных Greenplum, Vertica, ClickHouse, Teradata
• Разрабатывали процессы обработки сложных событий (CEP) во времени, приближенном к реальному, на Kafka Streams, Spark, Flink
• Руководили стажёрами или начинающими специалистами
• Работали по методологии Agile

• Работу в сильной команде, с которой можно расти
• Возможность влиять на процесс и результат
• Премии каждые полгода за эффективную работу
• Компенсацию оплаты питания на территории кампуса
• Тренажёрный зал и дежурство врача в офисе
• Расширенную программу ДМС: оплату 80% стоимости ДМС для супругов и детей
• Гибкий график

Локация: Москва и Санкт-Петербург