Senior Data Engineer

Senior Data Engineer

BrainRocket — глобальная компания, создающая сквозные технологические продукты для клиентов в сферах Fintech, iGaming и Marketing. Молодые, амбициозные и неудержимые, мы уже завоевали Кипр, Мальту, Португалию, Польшу и Сербию. Наша команда BRO состоит из 1300 блестящих умов, создающих инновационные идеи и продукты. Мы не следуем форматам. Мы их создаем. Мы строим то, что работает, быстро запускаем и гарантируем результат.

ВАЖНО: Эта позиция предполагает работу в офисе в Варшаве, Польша.

Мы можем оказать помощь с релокацией, если вы находитесь за пределами города или страны.

Мы ищем высококвалифицированного Data Engineer с опытом управления, проектирования и оптимизации конвейеров данных с использованием Apache Airflow, Snowflake и Apache Kafka.

Этот специалист будет играть ключевую роль в разработке надежных, масштабируемых и эффективных решений для обработки данных, обеспечивая целостность, надежность и доступность нашей инфраструктуры данных.

Обязанности

• Разрабатывать и внедрять модели данных для поддержки бизнес-требований, оптимизируя производительность и масштабируемость;
• Проектировать, создавать и поддерживать масштабируемые конвейеры данных с использованием Apache Airflow;
• Реализовывать и поддерживать потоковые конвейеры данных на основе Kafka для обработки данных в реальном времени и интеграции с различными системами;
• Интеграция со сторонними базами данных и API;
• Создавать процедуры мониторинга, оповещения и обслуживания для обеспечения работоспособности и надежности конвейеров данных;
• Сотрудничать с кросс-функциональными командами, включая специалистов по данным, аналитиков и заинтересованных сторон, для понимания требований к данным.

Требования

• Владение Python, SQL и опыт работы с манипуляцией и трансформацией данных;
• Знание методов хранилищ данных (Data Warehouse) и моделирования данных;
• Опыт проектирования, создания и поддержки сложных конвейеров данных с использованием ;