Почему ответ неизвестен
Люди всё чаще отправляют читать сайт агента. Как агент выбирает, что загрузить, чему верить и на что сослаться, не описано никем из тех, кто их строит, и меняется с каждым выпуском модели.
Метод
- Один конвейер, измеряемый по шагам: загрузка, поиск, понимание, рассмотрение, цитирование, действие.
- Эксперименты идут на настоящем коммерческом домене — на этом.
- Гипотезы регистрируются до запуска. Отложенные наборы остаются запечатанными.
- Методика и очищенные результаты открыты.
Что измеряем
- Доходит ли агент до страницы и в каком представлении её получает.
- Совпадает ли его ответ о компании с тем, что сказано на странице.
- Ссылается ли он на источник и может ли завершить действие.
Результаты на сегодня
Методика, предварительная регистрация и очищенные результаты лежат в открытом репозитории.
Этот сайт — испытательный стенд. У каждой страницы есть текстовый двойник, каталог проектов доступен как структурированные данные, и всё это собирается из того же источника, что и страницы для людей. Агент и человек получают одни и те же факты.
Что дальше
Измерить эту версию сайта относительно предыдущей на том же наборе вопросов агентам.