Data Engineer (B2B-игры и спорт)

О позиции

Продуктовая IT-компания, разрабатывающая высоконагруженные B2B-проекты в сфере развлечений, игр и спорта, ищет Data Engineer. Специалист будет строить и оптимизировать инфраструктуру обработки больших объёмов данных, обеспечивая надёжные процессы работы с данными.

Хранилище данных для аналитики и data science использует стек S3, Iceberg, ClickHouse и Trino. Работа в офисе в Белграде, рабочий процесс на русском языке.

Основные обязанности

• Проектировать архитектуру DWH, модели данных, слои и витрины
• Строить процессы ETL/ELT batch и streaming из разных источников
• Интегрироваться с API, Kafka и базами данных, настраивать потоки данных
• Разрабатывать и автоматизировать проверки качества данных (DQ), внедрять мониторинг и алертинг
• Настраивать метрики и дашборды в Grafana, контролировать производительность
• Рефакторить код, оптимизировать ETL-процессы и запросы
• Управлять версиями кода в GitLab и вести документацию в Confluence

Требования к кандидату

• Опыт Data Engineer 2–3 года
• Глубокое знание SQL и умение писать и оптимизировать сложные запросы
• Понимание работы ClickHouse, Trino и PostgreSQL
• Опыт работы с большими данными: S3, HDFS, форматы Parquet, Avro
• Знание методологий моделирования данных
• Интеграция данных через JDBC, REST API, Kafka и файловые системы (JSON, Parquet, S3)
• Конвейеры GitLab CI/CD, Docker и Kubernetes

Необходимые навыки

• Продвинутый Python, PySpark, Apache Airflow
• Grafana для визуализации метрик
• Архитектура DWH, проектирование слоёв данных и ETL-процессов

Что мы предлагаем

• Работа в офисе в Белграде с комфортными условиями
• Обеды и завтраки в офисе за счёт компании
• Обучение за счёт компании и компенсация изучения английского