Вайти
на главную
zarplata•12.08.2026

ML-инженер (LLM)

Гибрид Москва

Навыки и технологии

MongoDBElasticsearchPythonDocker

Ключевая задача

Разработка LLM-приложений (агентные и RAG-системы), оценка качества LLM, оптимизация инференса и создание web-интерфейсов для MVP и PoC.

Описание вакансии

Обязанности

  • разработка приложений с использованием LLM (агентные и RAG системы, системы обработки текстов);
  • разработка способов оценивания качества работы LLM приложений;
  • оптимизация инференса;
  • построение web-интерфейсов для MVP и PoC.

Требования

  • уверенное знание Python;
  • знание основ работы с Linux (shell, файловая система, процессы);
  • математическая подготовка: математическая статистика (оценка параметров, их характеристики, доверительные интервалы, бутстрап), основы машинного обучения (регрессоры, классификаторы, деревья, метрики, EDA);
  • базовое понимание работы LLM: понимание архитектуры, работа с внутренним состоянием, понимание принципов инференса (KV кэш, стратегии декодирования, структурированный вывод);
  • опыт построения языковых моделей: SFT, DPO + RL, LoRA, контрастное обучение, метрики качества;
  • опыт работы с RAG системами: понимание принципов функционирования, опыт участие в разработке;
  • агентные системы: понимание архитектур и их проблем;
  • способы замера качества LLM-приложений: метрики поиска данных, LLM-as-a-judge, сбор и разметка данных для специализированных бенчмарков, принципы работы общих бенчмарков.