Как проверить ссылки и цитаты в ответе ИИ: редакционный протокол без доверия на слово
Почему список ссылок нельзя принимать за фактчек
Модель может дать правдоподобный адрес, соединить цитату из одной редакции с заголовком другой или сослаться на страницу, где нужного утверждения нет. Иногда сама ссылка открывается, но содержит только краткое описание, а важная оговорка находится в документе ниже. Поэтому проверка должна отвечать на четыре разных вопроса: существует ли источник, относится ли он к нужной версии, подтверждает ли конкретную мысль и не вырвана ли цитата из условий.
Этот порядок подходит для черновиков, заметок и внутренних справок. Он не превращает языковую модель в научного рецензента и не заменяет профильного эксперта в медицине, праве, безопасности или финансах. Его цель скромнее: не дать красивой ссылке скрыть отсутствие подтверждения.
Шаг 1. Разделите ответ на проверяемые утверждения
Не проверяйте весь абзац как одну большую мысль. Разбейте его на отдельные факты: дату, число, название версии, причинно-следственное объяснение и вывод. Для каждого запишите, что именно должно подтвердиться. Фраза «компания обновила тариф и снизила цену на 20%» содержит как минимум два факта, а иногда и подразумеваемое сравнение, для которого нужны прежняя и новая цены.
Сначала отметьте утверждения, от которых зависит практическое решение. Для них нужен источник, максимально близкий к событию: документация, официальный релиз, нормативный акт, оригинальная статья или данные исследования. Вторичный пересказ полезен для ориентира, но не должен подменять первичный документ, если тот доступен.
Шаг 2. Откройте адрес самостоятельно
Скопируйте ссылку в браузер, не полагаясь на текстовый превью. Проверьте домен, заголовок, дату публикации и автора. Ищите страницу в навигации самого сайта: неожиданный поддомен, похожее написание бренда или редирект на другую тему — сигнал остановиться. Если ссылка ведёт на главную страницу вместо конкретного документа, она не подтверждает цитату.
Для PDF сохраните название, номер версии, дату и страницу. Для динамической документации зафиксируйте дату просмотра и версию API. Страница могла обновиться после ответа модели, поэтому позднее подтверждение не всегда доказывает, что формулировка была верна на момент публикации.
Шаг 3. Сопоставьте точный фрагмент и контекст
Найдите формулировку на странице или в документе. Проверьте не только совпадение слов, но и соседний абзац, сноску, таблицу и исключения. Цитата «поддерживается» может относиться к экспериментальному режиму, одной стране или только платному плану. Если текст пересказан, отметьте это явно; кавычки оставляйте только для дословного фрагмента.
Проверьте, правильно ли модель передала масштаб. Исследование на нескольких сотнях добровольцев не является доказательством для всей страны. Корреляция не доказывает причину. Прогноз не равен уже состоявшемуся результату, а заявление компании о тесте не становится независимым бенчмарком.
Шаг 4. Сверьте число и дату отдельно
Для процентов восстановите знаменатель, период и базу сравнения. «На 30% быстрее» может относиться только к одному набору и одной конфигурации. Проверьте единицы измерения, округление, валюту, часовой пояс и то, не смешаны ли месяц и квартал. Если число нельзя воспроизвести из опубликованных данных, не выдавайте его за точное.
Дата тоже требует контекста: дата пресс-релиза, дата вступления изменения в силу и дата доступности функции часто различаются. Для актуальных тарифов, ограничений и требований к доступу сверяйте действующую страницу непосредственно перед публикацией.
Шаг 5. Ведите небольшую таблицу решений
В редакционной таблице достаточно полей «утверждение», «источник», «точный фрагмент», «статус», «примечание» и «кто проверил». Статус может быть «подтверждено», «частично подтверждено», «не найдено» или «противоречит источнику». Сохраняйте исходную ссылку и дату просмотра, но не копируйте закрытые материалы, на которые у команды нет права доступа.
Если первоисточник не найден, есть три честных варианта: убрать конкретику, переформулировать в качестве неподтверждённого заявления с указанием того, кто его сделал, или отложить публикацию. Не просите модель «добавить надёжные источники» и затем автоматически принимать новый список: она может повторить ту же ошибку в другой форме.
Когда проверку нужно остановить
Останавливайте материал, если ссылка не существует, цитата не находится, версия документа неизвестна или два надёжных источника расходятся в важном факте. Для рискованных тем нужен второй проверяющий. Чем серьёзнее возможный вред от ошибки, тем меньше оснований публиковать формулировку на основании одного пересказа.
Проверка источников занимает время, но экономит его на исправлениях и возврате доверия. Модель может помочь найти места для проверки; ответственность за вывод и опубликованную цитату остаётся у редактора. Полезно дополнить процесс протоколом сравнения моделей и памяткой об ограничениях водяных знаков.
FAQ
Если ссылка открывается, значит цитата верна?
Нет. Нужно найти точное утверждение на странице и проверить соседний контекст, дату и ограничения.
Можно ли цитировать пересказ модели?
Как цитату — нет. Пересказ следует сверять с документом и оформлять своими словами; кавычки оставляют для точной формулировки.
Что делать, если первичного источника нет?
Убрать неподтверждённую деталь или ясно обозначить, кто именно сделал заявление. Для значимого факта лучше отложить публикацию.
Нужна ли таблица для короткой новости?
Полноценная таблица не обязательна, но список ключевых утверждений и отметка, чем каждое подтверждено, полезны даже для короткого текста.