Самая сильная модель o3 OpenAI была разоблачена как подделка, и вы заранее получили привилегированный доступ к банку тестовых вопросов FrontierMath.

Подрядчик Epoch AI по имени Meemi сообщил на форуме LessWrong, что OpenAI не только предоставила финансовую поддержку тесту FrontierMath, но также получила привилегированный доступ к банку тестовых вопросов. И это может быть важной причиной того, что производительность o3 значительно улучшилась за короткий период времени. Карина Хонг, аспирантка по математике в Стэнфордском университете, утверждает, что по соглашению Epoch AI OpenAI имеет привилегированный доступ к FrontierMath. Табель успеваемости был отменен после разоблачений подрядчика. Перед лицом разногласий Тамай Бесироглу, заместитель директора и соучредитель Epoch AI, быстро признал наличие проблемы на платформе X. Сообщается, что FrontierMath является очень важным тестом для оценки продвинутых способностей математического мышления. Он был создан совместно Epoch AI и более чем 60 ведущими математиками, в том числе многократными обладателями медали Филдса и старшими разработчиками предложений Международной математической олимпиады.