Блог пользователя bronze_coder

Автор bronze_coder, история, 19 месяцев назад, По-английски

MathArena has tested a few LLMs on the 2025 USAMO, achieving an average score of 2 points out of 42. Even I can score higher than that! Read the paper at https://arxiv.org/abs/2503.21934. Detailed info is available at https://matharena.ai/.

Maybe LLMs won't be taking over our jobs yet.

UPDATE: Gemini 2.5 pro apparently gets 10 points, which is better, but still not high enough to beat me.

  • Проголосовать: нравится
  • +73
  • Проголосовать: не нравится

»
19 месяцев назад, скрыть # |
 
Проголосовать: нравится +28 Проголосовать: не нравится

Inspirational! I can't wait to see where your resilience and consistency takes you next!!!

»
19 месяцев назад, скрыть # |
 
Проголосовать: нравится +1 Проголосовать: не нравится

The real question is can AI even qualify for USAMO (which is way harder than getting a 2 btw)

  • »
    »
    19 месяцев назад, скрыть # ^ |
     
    Проголосовать: нравится +21 Проголосовать: не нравится

    They score pretty high on computational because they only need to guess the answer instead of actually rigorously proving the answer. O3-mini seems to get an average of 12 and 14 on the AIME I and AIME II, respectively.

»
19 месяцев назад, скрыть # |
 
Проголосовать: нравится +30 Проголосовать: не нравится

With some luck, maybe I can score higher than LLMs on the 2025 USAMO as well!

»
19 месяцев назад, скрыть # |
 
Проголосовать: нравится +32 Проголосовать: не нравится

Just you wait, skin bags, just you wait

»
19 месяцев назад, скрыть # |
 
Проголосовать: нравится 0 Проголосовать: не нравится

Auto comment: topic has been updated by bronze_coder (previous revision, new revision, compare).