30 секунд
Tom’s Hardware нашло шесть послерелизных запусков Geekbench 7, которые связывает со средой OpenAI dots: от 8135 до 8991 балла в многопоточном тесте. Записи указывают на девять ядер AMD EPYC и 9,73 ГБ памяти. Сравниваемая среда Meta Muse использовала два ядра. Поэтому разница в процессорных баллах не означает такую же разницу в качестве выполнения задач агентами.
Подробнее
Издание Tom’s Hardware проверило открытую базу Geekbench 7 и обнаружило шесть послерелизных запусков, связываемых с OpenAI dots. По сведениям из записей, виртуальная машина получила девять ядер AMD EPYC 9V74 и 9,73 ГБ памяти. Это вывод по конфигурации теста, а не описание всей инфраструктуры dots от OpenAI.
Результаты составляли 1512–1614 баллов на одном ядре и 8135–8991 в многопоточном режиме. Отдельный скриншот показывал 9435 многопоточных баллов, однако соответствующая запись была загружена за четыре дня до запуска продукта. Кто именно выполнил тот тест, неизвестно.
Для Meta Muse издание приводит медиану около 1394 многопоточных баллов, а для послерелизных dots — около 8550. Но у Muse было два ядра против девяти. Различались и другие параметры, поэтому числа описывают конкретные вычислительные среды, а не сопоставимое испытание способности двух агентов решать пользовательские задачи.
Что это значит
У результата есть свой знаменатель
Разница между баллами сред dots и Muse полезна прежде всего как характеристика доступного процессорного ресурса. Девять ядер и два ядра выполняют многопоточный тест в разных условиях; приписывать весь разрыв модели было бы неверно.
Для оценки агента остаётся другая задача: проверить выполнение одинакового поручения, ошибки и ограничения доступа. Приведённый Geekbench этого не измеряет. Даже сведения о выделении ресурсов неполны: Tom’s Hardware отдельно отмечает, что неизвестно, сохраняют ли dots свои ядра во время простоя.
