на главную
telegram•10 ч. назадСвежая вакансияОпубликована сегодня на Telegram. Свежая — до 5 дней, умеренная — 6–14 дней, долгая — от 15 дней. Дата берётся с сайта-источника.
Data Engineer (Python)
260 000 – 280 000 RUB
УдалённоУдалённый форматПолная занятостьСтавка 260–280 тыс. ₽
Навыки и технологии
GitLab CI/CDPythonDockerRabbitMQRedisPostgreSQLKubernetesGrafanaPrometheusMySQLApache Airflow
Ключевая задача
Разработка интеграций и кастомных коннекторов на Python, оркестрация пайплайнов в Airflow и работа с метаданными в OpenMetadata.
Описание вакансии
Обязанности
- Реализация интеграций на проекте 🔌
- Разработка кастомных коннекторов (Ingestion Framework) и скриптов миграции метаданных 🧱
- Автоматизация через SDK ⚙️
- Настройка и оркестрация пайплайнов в Airflow 🌀
Требования
- От 3 лет коммерческой разработки интеграций на Python 📅
- Уверенный Python (Pydantic, классы, генераторы) 🐍
- Понимание архитектуры Source → Sink в OpenMetadata 🔄
- Опыт работы с Airflow и SQL 🛠️
- Знание, как использовать AI-инструменты для скаффолдинга коннекторов (команда scaffold-connector) для ускорения разработки ⚡
Будет +:
- Практический опыт с Kafka или RabbitMQ в production (consumer groups, DLQ, гарантии доставки) 📨
- Опыт с gRPC / Protobuf и Redis (reactive Lettuce, кеширование, TTL) 🧩
- Опыт с Docker, Kubernetes, CI/CD и observability (Micrometer, Prometheus, Grafana, OpenTelemetry) 📊
🎓 Образование: в приоритете кандидаты с высшим IT-образованием
Условия
💰 Ставка: 260 000 — 280 000 ₽ gross
📍 Локация: строго РФ
🌐 Формат работы: Удалённый
📋 Занятость: Полная