Я перестроил свой тест памяти AI. Вот что он может измерить сейчас.

Продолжение книги «Я подарил Клоду Коду мозг». Затем я измерил, сколько стоит попросить одного В моей последней статье был представлен тест памяти в виде сравнения продуктов. В комментариях правильно указано, что в дизайне все еще смешивается несколько вопросов. Была ли агенту выгода от памяти или от того, что ему приказали искать? Было ли заявленное значение p запланированным тестом или просто наиболее интересным результатом среди нескольких сравнений? Представлял ли элемент управления реальное пустое хранилище памяти или только отсутствие инструментов памяти? Я перестроил ориентир вокруг этих вопросов. Результатом является не просто увеличение таблицы лидеров. Это более полезный инструмент. Теперь он может разделить несколько частей пути памяти, измерить как пользу, так и вред, проверить, действительно ли присутствовало лечение, и позволить читателю проверить арифметику на основе опубликованных артефактов сеанса. Он также может выдать ноль. В первом официальном тесте с улучшенным дизайном плацебо набрало наивысшие баллы, и ни в одной группе не было интервала, исключающего ноль. Вот результат. Эта статья о том, как ее читать. Вопрос об измерении Тест больше не спрашивает только: Повышает ли продукт памяти успешность выполнения задач? Этот вопрос