на главную
hh•1 ч. назадСвежая вакансияОпубликована сегодня на hh.ru. Свежая — до 5 дней, умеренная — 6–14 дней, долгая — от 15 дней. Дата берётся с сайта-источника.Прямой откликПриоритетный откликВаше резюме и сопроводительное письмо уходят напрямую рекрутёру компании на почту, минуя общую очередь откликов на вакансию

Инженер данных (DWH)

ДМССтрахованиеОтпуск 28 днейМобильная связь

Навыки и технологии

GitLab CI/CDPythonGitPostgreSQLGreenplumClickHouseMySQL

Ключевая задача

Поддержка и развитие Корпоративного хранилища данных (DWH) и портала отчетности: разработка и эксплуатация пайплайнов загрузки данных, проектирование слоев хранения и моделей данных.

Описание вакансии

Обязанности

  • Разрабатывать и эксплуатировать пайплайны загрузки данных;
  • Обрабатывать большие и вложенные наборы данных, повторные загрузки, retry, идемпотентности и частичных ошибок;
  • Работать с распределёнными хранилищами и SQL-движками;
  • Понимать принципы работы PostgreSQL/Greenplum, колоночных СУБД и распределённых SQL-движков;
  • Уметь анализировать план запроса, оптимизировать JOIN, партиционирование и распределение данных, диагностировать skew, bloat и проблемы производительности;
  • Проектировать слои хранения и моделей данных: staging/bronze, silver, gold, SCD, Data Vault или аналогичные подходы;
  • Работать с Git и CI/CD: merge request, тестирование до merge, управление релизами, ручной deploy, rollback и разделение merge/deploy;
  • Строить и сопровождать регламентные процессы в Airflow, Dagster или аналогичных оркестраторах;

Требования

  • Уверенное владение Python и SQL;
  • Интеграция с API, обработка больших и вложенных наборов данных;
  • Понимание принципов работы PostgreSQL/Greenplum, колоночных СУБД и распределённых SQL-движков;
  • Понимание data lineage, контрактов данных, версионирования схем и управления метаданными.
  • Опыт dbt или аналогичного подхода к управлению SQL-трансформациями как кодом;
  • Понимание контейнеризации и инфраструктуры как кода.
  • Будет плюсом: Trino, ClickHouse, Iceberg, S3, каталоги наподобие Nessie.

Условия

  • Собственную платформу MTS Ocean для получения ИТ-ресурсов, а это значит, что деплой, мониторинг, observability — не будут для тебя проблемой, ты сможешь сосредоточиться на фичах;
  • Профессиональные гильдии инженеров, где мы поддерживаем друг друга и помогаем стать лучше;
  • Внутреннюю площадку TechTalks для обмена опытом, дискуссий, развития навыков самопрезентации;
  • Участие во внешних IT-мероприятиях. Наши эксперты выступают на ведущих профильных конференциях, таких как HighLoad++, DevOps Conf, Joker, AHA!, Матемаркетинг и другие. А еще мы организуем собственную масштабную конференцию True Tech Day и регулярно проводим митапы для разработчиков и инженеров;
  • Полезные курсы и вебинары в корпоративном университете и электронную библиотеку.

А ещё:

  • ДМС с первого месяца работы, включая стоматологию;
  • Страхование от несчастных случаев с 1 месяца работы. Материальную помощь в сложных жизненных ситуациях;
  • Отпуск 28 календарных дней;
  • Прием врачей общей практики и массаж в офисе;
  • Мобильная связь за счет компании и льготные тарифы для близких;
  • Подписка на онлайн-кинотеатр KION, сервис МТС Музыка, книжный сервис Строки от МТС, безлимитные мессенджеры и соцсети.