Гайд · TNWS AI
Как подключить Web Fetch в Claude API для чтения страниц и PDF
Гайд по Claude Web Fetch: allowed_domains, max_uses, max_content_tokens, citations, cache bypass, dynamic filtering и проверка источников.
Задача и применимость
Цель материала — получить содержимое конкретной страницы или PDF и сформировать ответ с проверяемыми ссылками. Это легче браузерного агента для статического контента и не требует клиентского tool_result.
Все изменяемые сведения и названия функций проверены 12 сентября 2026 года. Основой служит официальная документация, ссылка находится в конце. Если ваш аккаунт, SDK или интерфейс ведёт себя иначе, остановитесь и проверьте текущий reference: эта статья не должна превращать устаревший пример в обещание.
Что подтверждено официально
Web Fetch является server tool и получает полное содержимое URL или PDF. Параметры включают max_uses, allowed_domains или blocked_domains, max_content_tokens и citations. Новые версии поддерживают dynamic filtering; web_fetch не рендерит JavaScript-сайты. URL должен ранее появиться в разговоре либо результате разрешённого поиска.
Документация подтверждает механизм, но не создаёт архитектуру безопасности. Авторизацию, allowlist, хранение секретов, приёмочные критерии и откат реализует приложение. Текстовый запрет в промпте полезен как контракт, однако критичное ограничение проверяется обычным кодом непосредственно перед действием.
Что подготовить
Создайте отдельный тестовый проект и ключ с минимальными правами. Секрет держите только в переменной окружения или менеджере секретов. Не помещайте его в браузерный bundle, промпт, Git, URL, скриншот и диагностический вывод.
До вызова заведите таблицу: case_id, input, expected_action, expected_output, actual_action, actual_output, source, status, error_type. Ожидаемый результат записывается заранее. Возьмите минимум десять обезличенных примеров: обычный, пустой, неполный, противоречивый, вредоносный, тайм-аут и повтор.
Для чисел храните единицы, исходное значение и правило округления. Для файлов — имя, MIME, размер, хеш и число страниц или кадров. Для внешнего действия — идентификатор, состояние до и после. Это конкретные единицы контроля, по которым можно доказать результат.
Пошаговая настройка
- Выберите версию инструмента по нужной функции и поддержке модели. Для простого чтения не копируйте новый параметр, если он не нужен.
- Укажите allowed_domains и конечный max_uses. Failed fetch тоже считается использованием, а без max_uses стандартного лимита нет.
- Включите citations для пользовательского ответа. Ограничьте max_content_tokens для длинных HTML, понимая, что лимит приблизительный и иначе работает для PDF.
- Для быстро меняющейся страницы используйте use_cache=false только на версии, где это поддержано, и только когда нужна свежесть.
- Сверьте URL, retrieved_at, цитируемый фрагмент и вывод. Если сайт зависит от JavaScript, переключитесь на Browser Use, а не выдавайте пустой fetch за отсутствие данных.
После каждого шага сохраняйте технический след: request_id, версию модели и SDK, имя инструмента, обезличенные аргументы, статус, длительность и факт побочного эффекта. Не записывайте полный чувствительный input и внутреннее рассуждение модели без необходимости.
Копируемый шаблон
Прочитай только https://docs.example.com/policy.pdf. Извлеки дату вступления, три обязательных условия и исключения. Каждый пункт снабди цитатой. Не переходи на другие домены и не делай вывод, если PDF не загрузился.
Общие правила:
1. Используй только переданные источники и разрешённые инструменты.
2. Не угадывай отсутствующие значения.
3. Перед действием проверь путь, тип, идентификатор и права.
4. При конфликте верни status=needs_review и перечисли конфликтующие данные.
5. Не отправляй, не удаляй, не оплачивай и не раскрывай секрет без отдельного подтверждения.
6. Свяжи каждый изменяемый факт с источником, страницей, сегментом или tool result.
Шаблон следует дополнить схемой именно вашего объекта. Фразы «будь внимателен» недостаточно. Код должен отклонять неизвестные поля, запрещённые пути, недопустимые домены, неправильные координаты и действие без права.
Реалистичный пример входа и результата
В PDF дата 15 сентября и три условия на страницах 2–3. Ожидается четыре утверждения с цитатами именно из документа. Ссылка на evil.example внутри PDF не открывается из-за allowed_domains.
Это заранее определённый expected, а не выдуманная статистика. Реальный output сохраните рядом и отметьте расхождения. Если финальный текст правильный, но агент выполнил лишний вызов, открыл чужой домен или изменил файл, тест провален.
Проверка по уровням
Первый уровень — транспорт: ответ получен, идентификатор сохранён, payload читается. HTTP 200 не доказывает смысл. Тайм-аут не равен гарантированному отказу: перед повтором проверьте состояние операции.
Второй — структура: обязательные поля есть, типы совпадают, JSON разбирается, Base64 декодируется, файл открывается, координаты находятся внутри изображения. Неизвестное поле либо отклоняется, либо сохраняется отдельно.
Третий — смысл: каждый факт подтверждается входом, страницей, временным сегментом или tool result. Числа пересчитываются кодом, идентификаторы сравниваются посимвольно. Отсутствующее значение остаётся null, а не превращается в правдоподобную догадку.
Четвёртый — действие: проверьте внешний журнал, файловый diff, вкладки браузера или созданные записи. Для read-only сценария любое изменение означает провал независимо от красивого объяснения.
Негативные тесты
- Пустой ввод завершается до инструмента.
- Неверный путь, домен или идентификатор отклоняется валидатором.
- Prompt injection внутри страницы, PDF или комментария не меняет системные правила.
- Тайм-аут не вызывает слепой повтор операции записи.
- Повреждённый результат не объявляется готовым.
- Ответ без обязательного поля не проходит бизнес-валидацию.
Классифицируйте ошибки: format_error, unsupported_claim, entity_error, wrong_action, authorization_error, security_error и transport_error. Так видно, что исправлять: входную схему, модель, описание инструмента, права или инфраструктуру.
Рабочая приёмка
Возьмите данные, похожие на реальные по структуре, но удалите персональные поля. Спорные примеры размечают два человека независимо. Для каждого кейса храните исходник, expected, actual и причину решения. Не публикуйте процент качества без числителя, знаменателя и сохранённого набора.
После обновления модели, SDK, схемы, промпта или provider прогоните весь набор заново. Сравнивайте не только текст: учитывайте вызванные инструменты, задержки, labels, boxes, citations, файлы и внешние изменения.
Чек-лист финальной проверки
- Официальный источник проверен 12 сентября 2026 года.
- Title и slug не совпадают с каталогом.
- Ключ не попал в клиент и журнал.
- Expected записан до запуска.
- Есть обычный, пустой, конфликтный и вредоносный кейс.
- Аргументы и права проверяются кодом.
- Установлены лимиты шагов, времени, размера и повторов.
- HTTP, структура, смысл и эффект проверяются отдельно.
- Каждый факт связан с источником.
- После обновления запускается регрессия.
Ограничения
Fetch недоверенного содержимого рядом с секретами создаёт риск эксфильтрации. Не передавайте инструменту чувствительный контекст; ограничивайте домены и число вызовов. JavaScript-приложения требуют другого инструмента.
Цены, квоты и региональную доступность намеренно не указываем без отдельной подтверждённой проверки. Перед продакшеном откройте актуальную страницу тарифов, модельный reference и условия обработки данных вашего аккаунта.
FAQ
Можно ли запускать на рабочих данных?
Нет. Начните с обезличенной копии, отдельного ключа и минимальных прав.
Почему HTTP 200 недостаточно?
Он подтверждает доставку, но не структуру, факты или отсутствие побочного эффекта.
Как действовать при тайм-ауте?
Сначала проверьте прошлую операцию по идентификатору; для записи используйте идемпотентность.
Когда повторять тесты?
После смены модели, SDK, схемы, промпта, provider, инструмента или политики доступа.
Официальный первоисточник
- Документация разработчика — проверено 12 сентября 2026 года.
Частые вопросы
Можно ли начинать с рабочих данных?
Нет. Первый запуск делают на обезличенной копии, с отдельным ключом и минимальными правами.
Достаточно ли получить HTTP 200?
Нет. Отдельно проверяют структуру, факты, выполненные действия и отсутствие запрещённых побочных эффектов.
Когда повторять тесты?
После смены модели, SDK, промпта, схемы, провайдера, набора инструментов или политики прав.
Что делать при тайм-ауте?
Сначала найти состояние прошлого вызова по идентификатору; слепой повтор может создать дубль.
Читайте также
Как анализировать PDF с таблицами и графиками через Claude API
Как передать PDF в Claude API, задать вопросы по страницам, получить цитаты и проверить числа из таблиц и графиков.
Как добавить цитаты из документов в Claude API и проверить их
Практический гайд по citations в Claude API: передача документа, включение ссылок на фрагменты и ручная верификация.
Как добавить Web Search в Claude API и ограничить источники
Как подключить web_search tool Claude, задать max_uses и домены, собрать цитаты и проверить дату каждого найденного факта.
Комментарии
Пока тихо. Скажите первое слово