OpenAI без объявления вдвое снизила уровень выдумок у Astra.
OpenAI за несколько часов после четвергового запуска несколько раз меняла цифры оценок в записи о GPT-6 Astra. Уровень выдумок сначала упал с 4,2% до 2%, а затем вернулся к 4,2%. В OpenAI говорят, что правки должны были показать самую точную оценку.
Почему это важноИменно эти стартовые цифры вы читаете, когда выбираете модель, и они меняются позже. Исследователи из Стэнфорда говорят, что системная карта почти не описывает этот тест.