Поиск.
Найдено: 0 моделей и 10 материалов
Материалы
Как создать набор регрессионных вопросов для AI-бота в MLflow
Сохраняем вопросы и ожидаемые ответы в MLflow GenAI Dataset, проверяем схему и не смешиваем тесты с реальными клиентскими данными.
Как включить автотрассировку вызовов OpenAI SDK в MLflow
Подключаем mlflow.openai.autolog к эксперименту и проверяем, что реальные вызовы SDK создают трассы.
Как найти ошибочные и медленные запросы AI-приложения в MLflow Traces
Фильтруем статус ERROR и длительность через search_traces, сверяя результат с искусственными успешным и аварийным вызовами.
Как проверить формат ответа нейросети собственным scorer в MLflow
Создаём @scorer для проверяемого префикса и проводим оценку без LLM-судьи и без внешнего API.
Как разделить поиск и сборку ответа RAG на спаны MLflow Tracing
Размечаем вручную поиск фрагмента и формирование ответа; проверяем вложенные спаны без вызова платной модели.
Как скрыть email в трассе MLflow до её записи на сервер
Настраиваем span_processors для удаления email из входов спана и проверяем, что исходный текст не ушёл в backend.
Как сравнить две редакции ответчика на одном наборе в MLflow Evaluate
Запускаем два predict_fn на одинаковых вопросах и отдельно сравниваем воспроизводимый тест обязательного ответа.
Как связать реплики диалога по session_id в MLflow Tracing
Передаём псевдоним пользователя и session_id, проверяем группировку двух запросов без хранения настоящих идентификаторов.
Как зарегистрировать новую версию русского промпта в MLflow Prompt Registry
Создаём две неизменяемые версии промпта с переменными {{question}} и проверяем их форматирование без вызова модели.
Почему MLflow продолжает отдавать старый промпт после смены алиаса
Разбираем алиас production и клиентский кеш; проверяем смену версии с cache_ttl_seconds=0 и фиксированным URI.