Сравнение Codex и Claude Fable 5 в генерации игры Raccoon Heist¶
5.0/10
Контекст¶
Саймон Уиллисон продолжает эксперимент по созданию полноценной игры «Raccoon Heist» по одному промпту, сгенерированному ещё в 2023 году с помощью GPT-3 и DALL-E. Ранее он показал, что Claude Fable 5 справился с задачей, но сделал игру менее амбициозной: один енот бегал по заднему двору и собирал монеты и рыбу.
Суть¶
Уиллисон задал тот же промпт Codex Desktop с моделью GPT-5.6 Sol Ultra в режиме агрессивного использования субагентов. Результат оказался заметно ближе к исходной задумке: действие перенеслось в музей, где игрок освобождает двух других енотов, ставит их друг на друга и похищает золотую сардину из витрины. Модель также сгенерировала текстуры и промпты для них через gpt-image-2, а полный транскрипт работы Codex был сохранён в репозитории. Однако в первоначальной версии остался заметный баг: у каждого енота над головой висело увеличенное глазное яблоко размером с гигантскую сферу. Хотя Codex просматривал скриншоты во время разработки, он не обнаружил и не исправил ошибку сам. Автор устранил её двумя уточняющими промптами: сначала спросил, почему у енотов огромные чёрные сферы, затем попросил исправить. На проект Codex потратил 52 минуты; Уиллисон также привёл оценку стоимости сессии по полным API-ценам через AgentsView, хотя сам использовал месячную подписку Codex.
Вывод¶
По наблюдению автора, Codex с GPT-5.6 Sol Ultra дал более амбициозный и соответствующий замыслу результат, чем Claude Fable 5, но всё равно пропустил очевидный визуальный баг. Это делает эксперимент полезным практическим примером сравнения моделей, но не даёт глубокого объяснения причин различий.