Поиск.
Найдено: 0 моделей и 15 материалов
Материалы
Как создать набор регрессионных вопросов для AI-бота в MLflow
Сохраняем вопросы и ожидаемые ответы в MLflow GenAI Dataset, проверяем схему и не смешиваем тесты с реальными клиентскими данными.
Как найти ошибочные и медленные запросы AI-приложения в MLflow Traces
Фильтруем статус ERROR и длительность через search_traces, сверяя результат с искусственными успешным и аварийным вызовами.
Как проверить формат ответа нейросети собственным scorer в MLflow
Создаём @scorer для проверяемого префикса и проводим оценку без LLM-судьи и без внешнего API.
Как разделить поиск и сборку ответа RAG на спаны MLflow Tracing
Размечаем вручную поиск фрагмента и формирование ответа; проверяем вложенные спаны без вызова платной модели.
Как скрыть email в трассе MLflow до её записи на сервер
Настраиваем span_processors для удаления email из входов спана и проверяем, что исходный текст не ушёл в backend.
Как сравнить две редакции ответчика на одном наборе в MLflow Evaluate
Запускаем два predict_fn на одинаковых вопросах и отдельно сравниваем воспроизводимый тест обязательного ответа.
Как связать реплики диалога по session_id в MLflow Tracing
Передаём псевдоним пользователя и session_id, проверяем группировку двух запросов без хранения настоящих идентификаторов.
Как включить автотрассировку вызовов OpenAI SDK в MLflow
Подключаем mlflow.openai.autolog к эксперименту и проверяем, что реальные вызовы SDK создают трассы.
Как зарегистрировать новую версию русского промпта в MLflow Prompt Registry
Создаём две неизменяемые версии промпта с переменными {{question}} и проверяем их форматирование без вызова модели.
Почему MLflow продолжает отдавать старый промпт после смены алиаса
Разбираем алиас production и клиентский кеш; проверяем смену версии с cache_ttl_seconds=0 и фиксированным URI.
Как объединить full-text и vector search в Neo4j через RRF
Hybrid retrieval для точных кодов и смысла: независимые ранги, Reciprocal Rank Fusion, одинаковый ACL и сравнение lexical/vector/hybrid по nDCG@10.
Как сохранить embeddings в Neo4j через setNodeVectorProperty без смешивания моделей
Идемпотентная запись vectors в узлы: MERGE, model_id, checksum, проверка длины и db.create.setNodeVectorProperty вместо строковой сборки Cypher.
Как получить JSON по схеме из Gemini API: Structured Outputs без парсинга текста
Рабочий JSON Schema для Gemini Structured Outputs, проверка результата через Zod, обязательные поля и обработка незавершённого ответа.
Как провести red teaming ИИ-чатбота: сценарии атак и безопасная проверка
Как безопасно проверить ИИ-чатбота на обход инструкций, утечки данных и опасные действия: сценарии, журнал и критерии.
Как сделать первый запрос к Gemini Interactions API: рабочий пример на JavaScript
Первый запрос к рекомендованному Gemini Interactions API: установка SDK, ключ, interaction.output_text, хранение данных и проверка ошибок.