Онлайн-игры из книги Math Games with Bad Drawings с ChatGPT Agent, который играл слабо
Автор дал ChatGPT Agent на GPT-5 сыграть в онлайн-версии игр из книги Бена Орлина Math Games with Bad Drawings. В целом всё сработало, но играл агент плохо, и автор легко его обыгрывал.
Что сделали
Автор отправил GPT-5 в режиме агента ChatGPT на онлайн-версии игр из книги Бена Орлина Math Games with Bad Drawings. Агент кликал по сайтам игр в своём браузере и выбирал ходы, а его рассуждения были видны. Автор играл за противника и после каждого своего хода писал «твой ход», потому что агент сам не понимал, когда наступает его очередь.
Что получилось
В целом всё сработало, и это лучше прежних попыток автора с арендой машины и налоговыми формами. Но играл агент плохо. Автор легко обыграл его и за Боба, и за Алису, а ещё агент ошибочно уверял, что может сам следить за сменой хода.
На что обратить внимание
Агент не умеет следить за изменениями на странице, поэтому подталкивать его приходится каждый ход. Один из комментаторов заметил, что эти игры могут быть в обучающих данных модели.
Пояснение
Math Games with Bad Drawings это книга Бена Орлина с простыми математическими играми. Боб и Алиса здесь это две стороны в игре.
Кому пригодится
Тем, кто хочет проверить, как браузерный агент справляется с интерактивными сайтами, а не только с формами.
Попробуйте сами с ChatGPT Agent
Открой [адрес онлайн-игры, например математической игры или головоломки] и сыграй [число] раундов, стараясь набрать как можно больше очков. Назови свой счёт и опиши, где тебе было трудно. Остановись, если сайт попросит войти, заплатить или ввести личные данные.
Нужна помощь с запуском? Вступайте в сообщество AI Pack ↗
Источник: agifriday.substack.com ·